Svmuu訊 智譜面向部分企業客户推出 GLM-5.1 高速版 API,其模型輸出速度達到 400 tokens/s,刷新全球大模型官方介面端到端速度紀錄。
據瞭解,該高速版在保留原有旗艦模型能力基礎上,由智譜與 TileRT 團隊聯合研發的高性能推理引擎驅動。該引擎透過重構 GPU 運行排程機制,將模型靜態編排為常駐 GPU 的 persistent Engine Kernel,以降低傳統推理中的核心啟動與顯存讀寫延遲。
在多卡場景下,TileRT 進一步將 8 卡 NVL 拓撲中的 GPU 節點特化為不同功能 Worker,以提升注意力層計算與跨卡通訊效率。
目前,該高速版服務已向智譜 MaaS 平台部分企業客户開放。未來將繼續優化 FP8 推理及超長上下文能力,面向 AI 程式設計、即時互動與即時語音等低延遲場景提供支援。
智譜發佈GLM-5.1高速版API,輸出速度達400 tokens/s
暫無AI深度解讀,點擊上方「AI解讀」按鈕,即刻生成一份全新解讀
免責聲明:本內容僅代表作者個人觀點,不構成任何投資理財建議。
24小時熱榜
-
1
FLOW是什麼幣種?Flow區塊鏈生態與現狀解析
-
2
報告:對沖基金已退出比特幣ETF套利交易,主權財富基金和散户投資者接盤
-
3
LS Cable子公司Gaon Cable獲9000萬美元美國AI數據中心電纜訂單
-
4
伊朗總統佩澤什基安表示,伊朗已準備好擴大與土耳其的合作,以服務共同利益並增強地區安全。
-
5
全球商業論壇敦促商界領袖擁抱AI並重思策略
-
6
Unlimit 創始人注資 Phase 區塊鏈 4500 萬美元,主網同步上線
-
7
谷歌和微軟三季度資本支出不及預期,引發對AI建設成本和進度的擔憂
-
8
伊朗伊斯蘭革命衞隊稱在霍爾木茲海峽附近擊落一架美國製造的MQ-1無人機
-
9
事件預測平台Kalshi完成10億美元融資,估值達400億美元,非體育收入運行率突破10億美元
-
10
歐洲央行最新員工預測:債券收益率上升將使2027-28年經濟增長累計減少100個基點,通脹減少90個基點
今日行情
推薦閱讀



