凯时AG

2026-07-06 16:49:00 设为首页 | 加入珍藏

业界首个!美团宣布LongCat-2.0:总参数规模1.6万亿 全程由国产算力训练

2026-07-06 16:49:00 宣布 泉源:跑跑车游戏网 作者:张鸿信 浏览:8508次

快科技6月30日新闻,,,,,,今日,,,,,,美团宣布新一代万亿参数大模子LongCat-2.0,,,,,,并将对外开源。。。

据先容,,,,,,LongCat-2.0是业界首个依赖国产算力完成训练、推理全流程的万亿参数大模子,,,,,,总参数规模1.6万亿,,,,,,从零最先预训练,,,,,,原生支持1M超长上下文。。。

此前,,,,,,该大模子的测试版本在OpenRouter上的总挪用量已跻身全球前三。。。

其中在Hermes的月挪用量位列全球第一,,,,,,在Claude Code的月挪用量位列全球第二,,,,,,仅次于Claude Opus 4.8。。。

LongCat官方宣布,,,,,,将于近期开源Infra框架、推理引擎、模子参数等焦点手艺,,,,,,以回馈全球开发者社区。。。

据悉,,,,,,LongCat-2.0预训练数据规模凌驾30T tokens,,,,,,笼罩中文、英文、多语言和代码等多类数据。。。

面临万卡级训练中的硬件故障、通讯异常、显存压力与数值波动,,,,,,LongCat团队从稳固性、准确性和效率三方面攻克国产算力训练难题。。。

在稳固性上,,,,,,通过HCCL异常处理、弹性扩缩卡和自动故障恢复,,,,,,将月均日故障率降低70%以上。。。

在准确性上,,,,,,通过自研设计确定性算子、Bitwise一致性验证和参数检测,,,,,,包管训练效果的可靠,,,,,,同时基于实践提升要害 ????榕趟憔取⒂呕疪educe逻辑。。。

在效率上,,,,,,通过流水线调理、显存优化和算子级控核,,,,,,训练MFU提升1.5倍。。。

最终,,,,,,LongCat实现稳态日吞吐凌驾1T tokens/day,,,,,,完成万亿参数MoE模子在国产算力上的稳固训练。。。

当天,,,,,,参访团一行还探望了2025年获评孝老爱亲类“中国好人”的张先友,,,,,,老人五十年如一日悉心照料智力障碍大伯哥的感人故事,,,,,,尽显清江淳厚乡风,,,,,,成为墟落精神文明建设的生动缩影。。。

责任编辑:古智仁    校对:姚哲维

今日热门

  1. 媒体:沙特3月曾对伊朗发动多次未果真空袭
  2. 一见·从这封回信,,,,,,读懂“嘀嗒、嘀嗒”的回响
  3. 好品牌强农富农之路
  4. 广西贵州至江南地区仍有较强降雨 内蒙古华北东北地区多雷阵雨
  5. 记者现场感受天下杯洛杉矶开赛气氛:赛事气氛有但未几
  6. 英国央行维持基准利率3.75%稳固
  7. 清华大学教授获意大利“费尔特里内利奖” 系首位获奖亚洲学者
  8. 首届中俄界江海员实操能力竞赛收官
  9. 2026天下跳水冠军赛第四个角逐日 安徽队和湖北队各得一金
  10. 税收数据显示中国具身智能工业总体生长向好

相关推荐

【网站地图】