腾讯混元自研深度思考模型 T1 发布:吐字快、能秒回,擅长超长文处理
GoodNav 3 月 21 日消息,据腾讯混元微信公众号的消息,腾讯混元今天正式发布了自研深度思考模型混元 T1 的正式版。
根据官方介绍,「T1」具备快速吐字和秒回的能力,且在超长文处理方面表现出色,是腾讯自主研发的强推理模型。通过大规模强化学习及数学、逻辑推理、科学与代码等方面的专项优化,混元 T1 正式版在推理能力上有了显著提高。
在体现推理模型基本能力的常见基准测试中,在大型语言模型评估增强数据集 MMLU-PRO 中,混元 T1 取得了 87.2 分,位居第二,仅次于 o1。在 CEval、AIME、Zebra Logic 等中英文知识与竞赛级数学、逻辑推理的公共基准测试中,混元 T1 的表现也达到了业内领先推理模型的水平。
「T1」在多个对齐任务、指令执行任务和工具利用任务中表现出了极强的适应性。
官方表示,混元 T1 正式版延续了混元 Turbo S 的创新架构,采用了 Hybrid-Mamba-Transformer 融合模式。这是工业界首次将混合 Mamba 架构成功应用于超大型推理模型,有效降低了传统 Transformer 结构的计算复杂度,减少了 KV-Cache 的内存占用,从而显著降低了训练与推理成本。
官方还强调,混元 T1 在超长文本推理方面具有独特优势。凭借出色的长文捕捉能力,混元 T1 能有效解决长文推理中常见的上下文丢失和长距离信息依赖的问题。同时,混合 Mamba 架构对长序列处理进行了专项优化,采用高效的计算方式,在确保长文本信息捕捉能力的同时,显著降低了资源消耗,实现了在相似的激活参数量下解码速度提升 2 倍。
腾讯混元 T1 现已上线:https://llm.hunyuan.tencent.com/#/chat/ hy-t1
在 API 使用方面,混元 T1 已在腾讯云官网上线,输入价格为每百万 tokens 1 元,输出价格为每百万 tokens 4 元。