凯时AG

2026-07-05 06:04:10 设为首页 | 加入珍藏

业界首个!美团宣布LongCat-2.0:总参数规模1.6万亿 全程由国产算力训练

2026-07-05 06:04:10 宣布 泉源:手机游戏下载 作者:何玉婷 浏览:3793次

快科技6月30日新闻,,,今日,,,美团宣布新一代万亿参数大模子LongCat-2.0,,,并将对外开源。。。。。。

据先容,,,LongCat-2.0是业界首个依赖国产算力完成训练、推理全流程的万亿参数大模子,,,总参数规模1.6万亿,,,从零最先预训练,,,原生支持1M超长上下文。。。。。。

此前,,,该大模子的测试版本在OpenRouter上的总挪用量已跻身全球前三。。。。。。

其中在Hermes的月挪用量位列全球第一,,,在Claude Code的月挪用量位列全球第二,,,仅次于Claude Opus 4.8。。。。。。

LongCat官方宣布,,,将于近期开源Infra框架、推理引擎、模子参数等焦点手艺,,,以回馈全球开发者社区。。。。。。

据悉,,,LongCat-2.0预训练数据规模凌驾30T tokens,,,笼罩中文、英文、多语言和代码等多类数据。。。。。。

面临万卡级训练中的硬件故障、通讯异常、显存压力与数值波动,,,LongCat团队从稳固性、准确性和效率三方面攻克国产算力训练难题。。。。。。

在稳固性上,,,通过HCCL异常处理、弹性扩缩卡和自动故障恢复,,,将月均日故障率降低70%以上。。。。。。

在准确性上,,,通过自研设计确定性算子、Bitwise一致性验证和参数检测,,,包管训练效果的可靠,,,同时基于实践提升要害??? ??榕趟憔取⒂呕疪educe逻辑。。。。。。

在效率上,,,通过流水线调理、显存优化和算子级控核,,,训练MFU提升1.5倍。。。。。。

最终,,,LongCat实现稳态日吞吐凌驾1T tokens/day,,,完成万亿参数MoE模子在国产算力上的稳固训练。。。。。。

随藏书一同“落户”浙大的,,,尚有匹俦二人的生涯新篇。。。。。。2025年,,,他们受聘为浙大中西书院特聘教授。。。。。。生涯融入江南四序,,,徐泓特殊在社交平台上纪录,,,早春赏郁金香盛开,,,清明品尝青团,,,暖冬与太太在洒满阳光的草坪上散步;;;;;泡云南咖啡,,,吃苏式月饼。。。。。。

责任编辑:林新绮    校对:许文华

今日热门

  1. 中央审核巡查组暗访,,,外地消防帮旅馆“打掩护”,,,被就地发明
  2. 中国硬刚国际足联 究竟在争什么
  3. 天下小麦收获进度已过三成半 各地智慧农机显身手
  4. 闽宁协作30年 固原借力帮扶彻底甩掉绝对贫困的帽子
  5. 第23届香格里拉对话会终结
  6. 超300款AI产品将全球首发 2026天下人工智能大会争先看
  7. 中俄联合巡航阵容强盛 日本慌了??? ??
  8. 港澳高校博士冀与山东共探人工智能生长新机缘
  9. 新一署理想L6申报图宣布
  10. 乌总统称乌白领土中继站停运被指作秀

相关推荐

【网站地图】