Loading...

国产大模型 DeepSeek-V3 开源:6710 亿参数自研 MoE,性能和 GPT-4o 不分伯仲

GoodNav 12 月 27 日消息,官方公众号“深度求索”于昨日(12 月 26 日)发布博文,宣布推出并开源 DeepSeek-V3 模型,用户可以访问官网 chat.deepseek.com,与最新的 V3 模型进行互动。

根据博文介绍,DeepSeek-V3 是一个拥有 6710 亿参数的专家混合(MoE,利用多个专家网络将问题空间划分成同质区域)模型,激活参数为 370 亿,并在 14.8 万亿个 token 上进行了预训练。

多项评测结果超过了 Qwen2.5-72B 和 Llama-3.1-405B 等开源模型,其性能与世界顶尖闭源模型如 GPT-4o 和 Claude-3.5-Sonnet 不相上下。

国产大模型 DeepSeek-V3 开源:6710 亿参数自研 MoE,性能和 GPT-4o 不分伯仲

国产大模型 DeepSeek-V3 开源:6710 亿参数自研 MoE,性能和 GPT-4o 不分伯仲

该模型在知识、长文本、代码、数学和中文等多个领域实现了显著的进步,特别是在算法代码和数学方面表现突出,其生成速度提升至 60 TPS,较 V2.5 提升了三倍。

官方已开源原生 FP8 权重,并提供 BF16 转换脚本,以便利社区的适配和应用。SGLang、LMDeploy、TensorRT-LLM 和 MindIE 均已支持 V3 模型的推理。

随着 DeepSeek-V3 的更新上线,DeepSeek 还调整了 API 服务的定价,模型 API 服务的定价将更改为每百万输入 tokens 0.5 元(缓存命中)/ 2 元(缓存未命中),每百万输出 tokens 8 元。

国产大模型 DeepSeek-V3 开源:6710 亿参数自研 MoE,性能和 GPT-4o 不分伯仲

官方还决定为新模型设置长达 45 天的优惠体验期:从即日起至 2025 年 2 月 8 日,DeepSeek-V3 的 API 服务价格将保持在每百万输入 tokens 0.1 元(缓存命中)/ 1 元(缓存未命中),每百万输出 tokens 2 元,已有注册用户和在此期间注册的新用户均可享受该优惠价格。

国产大模型 DeepSeek-V3 开源:6710 亿参数自研 MoE,性能和 GPT-4o 不分伯仲

© 版权声明

相关文章

暂无评论

您必须登录才能参与评论!
立即登录
暂无评论...