小米大模子上线新模式 推理速率突破1000 tokens/s
2026-06-15 10:20:23 宣布
泉源:口袋巴士
作者:陈宁安
浏览:9782次
新京报贝壳财经讯(记者陈维城)6月8日晚,,小米MiMo手艺团队正式上线Xiaomi MiMo-V2.5-Pro-UltraSpeed模式,,在通用GPU上推理速率突破1000 tokens/s。。。。
MiMo-V2.5-Pro-UltraSpeed通过对模子推理系统的全链路工程能力优化,,在不降低模子能力条件下,,首次把推理速率提升至1000 tokens/s,,且无需定制芯片、只使用通用GPU即可告竣。。。。这一突破突破了“快、强、通用 GPU无法兼得”的行业不可能三角。。。。
小米MiMo手艺团队体现,,该突破是基于Xiaomi MiMo-V2.5 Pro的SWA架构,,叠加了FP4 Experts、DFlash解码以及TileRT团队的执行系统Co?design,,从模子到推理引擎再到GPU执行路径举行了全链路优化。。。。
克日起至6月23日,,MiMo-V2-Pro-UltraSpeed模式将接纳申请制限时开放,,通过申请的用户可接入API 举行体验。。。。
自4月尾以来,,小米AI在模子能力、推理本钱和推理效率三个维度接连取得突破:4月23日,, MiMo-V2.5-Pro在全球权威大模子测评平台Artificial Analysis上,,获得综合智能指数与Agent指数全球开源模子并列第一;;;5月27日,,Xiaomi MiMo-V2.5系列模子API因手艺优化宣布最高降价99%,,并同程序整Token Plan计费系统。。。。6月8日,,MiMo-V2.5-Pro-UltraSpeed以1000 tokens/s创下万亿参数旗舰模子推理速率新纪录。。。。
编辑 杨娟娟
校对 王心
并网型项目与公共电网各自在责任界面内推行响应电力清静风险管控责任。。。。并网型项目应统筹思量内部源荷特征、平衡能力、经济收益等因素,,自主合理确定接入公共电网容量;;;公共电网按接网容量和有关协议推行供电责任。。。。并网型项目主责单位应组织内部电源和负荷建设响应的调理机制,,确保项目与公共电网的交流功率不凌驾接网容量。。。。
责任编辑:刘冠良 校对:王仪谕