Svmuu讯 智谱面向部分企业客户推出 GLM-5.1 高速版 API,其模型输出速度达到 400 tokens/s,刷新全球大模型官方接口端到端速度纪录。
据了解,该高速版在保留原有旗舰模型能力基础上,由智谱与 TileRT 团队联合研发的高性能推理引擎驱动。该引擎通过重构 GPU 运行调度机制,将模型静态编排为常驻 GPU 的 persistent Engine Kernel,以降低传统推理中的内核启动与显存读写延迟。
在多卡场景下,TileRT 进一步将 8 卡 NVL 拓扑中的 GPU 节点特化为不同功能 Worker,以提升注意力层计算与跨卡通信效率。
目前,该高速版服务已向智谱 MaaS 平台部分企业客户开放。未来将继续优化 FP8 推理及超长上下文能力,面向 AI 编程、实时交互与实时语音等低延迟场景提供支持。
智谱发布GLM-5.1高速版API,输出速度达400 tokens/s
暂无AI深度解读,点击上方「AI解读」按钮,即刻生成一份全新解读
免责声明:本内容仅代表作者个人观点,不构成任何投资理财建议。
24小时热榜
-
1
FLOW是什么币种?Flow区块链生态与现状解析
-
2
报告:对冲基金已退出比特币ETF套利交易,主权财富基金和散户投资者接盘
-
3
LS Cable子公司Gaon Cable获9000万美元美国AI数据中心电缆订单
-
4
伊朗总统佩泽什基安表示,伊朗已准备好扩大与土耳其的合作,以服务共同利益并增强地区安全。
-
5
全球商业论坛敦促商界领袖拥抱AI并重思策略
-
6
Unlimit 创始人注资 Phase 区块链 4500 万美元,主网同步上线
-
7
谷歌和微软三季度资本支出不及预期,引发对AI建设成本和进度的担忧
-
8
伊朗伊斯兰革命卫队称在霍尔木兹海峡附近击落一架美国制造的MQ-1无人机
-
9
事件预测平台Kalshi完成10亿美元融资,估值达400亿美元,非体育收入运行率突破10亿美元
-
10
欧洲央行最新员工预测:债券收益率上升将使2027-28年经济增长累计减少100个基点,通胀减少90个基点
今日行情
推荐阅读



