Svmuu讯 智谱面向部分企业客户推出 GLM-5.1 高速版 API,其模型输出速度达到 400 tokens/s,刷新全球大模型官方接口端到端速度纪录。
据了解,该高速版在保留原有旗舰模型能力基础上,由智谱与 TileRT 团队联合研发的高性能推理引擎驱动。该引擎通过重构 GPU 运行调度机制,将模型静态编排为常驻 GPU 的 persistent Engine Kernel,以降低传统推理中的内核启动与显存读写延迟。
在多卡场景下,TileRT 进一步将 8 卡 NVL 拓扑中的 GPU 节点特化为不同功能 Worker,以提升注意力层计算与跨卡通信效率。
目前,该高速版服务已向智谱 MaaS 平台部分企业客户开放。未来将继续优化 FP8 推理及超长上下文能力,面向 AI 编程、实时交互与实时语音等低延迟场景提供支持。
智谱发布GLM-5.1高速版API,输出速度达400 tokens/s
免责声明:本内容仅代表作者个人观点,不构成任何投资理财建议。如有发现违规内容点击举报
24小时热榜
-
1
SpaceX IPO推动代币化股票交易创纪录,6月链上交易量达38.6亿美元
-
2
Michael Coates:已出任Solana基金会首席信息安全官
-
3
微软在部分应用中以自研AI模型取代OpenAI和Anthropic的模型
-
4
EIA:大多数原油产量将在今年年底前恢复至战前水平
-
5
COTI币价值与长期投资潜力分析
-
6
FLOW币价值解析:值得长期投资吗?
-
7
BENJIb与Meme币永续合约:加密市场新风暴来袭!
-
8
DVPN 代币的购买与交易指南及上线交易所
-
9
DEC币是什么?Dark Energy Crystals (DEC) 价格、总量和交易平台介绍
-
10
NOMAD币是什么?NOMAD币的交易与现状解析
推荐阅读








