單機跑Kimi K3首破5.85毫秒,同等投資Token產能提升10倍!浪潮信息破局Agent算力難題

2026年9月22日 18:50
單機跑Kimi K3首破5.85毫秒,同等投資Token產能提升10倍!浪潮信息破局Agent算力難題
站內 AI 整理稿

(公眾號:zhidxcom) 作者 | 王涵 編輯 | 漠影 2026年,Agent的火爆程度空前。9月21日,在AICC 2026大會上,IDC發佈了一組數字:2026年全球活躍Agent約7940萬個,到2030年將達22.16億個。而同期Token消耗量的增長更為驚人:從2026年的0.026Peta(千萬億),增長到2030年的152667Peta。Agent數量增長約28倍,Token消耗卻增長數百萬倍。需求側增長如此之快,算力供給能接住嗎?今年有兩個案例十分典型: 一是Kimi K3。這個總參數量2.8萬億的模型,權重文件達到1.

56TB,普通AI服務器的GPU顯存連權重都裝不下,官方推薦至少64卡甚至更大規模才能運行。它指向的是“向上”的困境:當Agent需要更強推理、更長上下文和更多智能體協同,能力上限越高,部署門檻越從單機走向集群。二是DeepSeek。2026年上半年,它曾將V4-Pro的API價格下調75%,並稱調整長期有效;但8月又預告整體提價,理由直指“算力不足”。它指向的是“向廣”的困境:當Agent大規模調用便宜模型,性價比算力的需求被迅速放大,容量不夠,低價供給就難以持續。這兩個問題怎麼破?

在AICC 2026大會上,浪潮信息給出了自己的回答:向上,Capability AI Compute;向廣,Capacity AI Compute。會上,浪潮信息正式發佈元腦SD200 Ultra超節點AI服務器和元腦HC2000多元算力機組。“向上向廣”兩個方向齊頭並進,通過系統協同,浪潮信息從提供算力走向生產智能。一、向上,超節點突破智能上限 要理解向上的瓶頸從何而來,我們要先看清AI的需求端發生了什麼變化。過去,人們對AI的需求是回答問題,算力調用是單次且臨時的。而在Agent時代,一次用戶意圖背後,可能是幾十次、幾百次甚至更多次推理,是多個Agent連續幾小時甚至幾天的協同工作。

應用形態的變化,直接提高了對算力系統的要求。與此同時,前沿模型的Scaling up也在這一時期進入加速期。以Kimi K3為例,其參數量已經達到2.8萬億,權重文件約1.56TB,普通服務器顯存連權重都裝不下,更不用說百萬Token上下文。官方推薦擴展到64卡甚至更大規模,才能讓模型真正運行。更不用說未來可能會擴展到十萬億參數量級的更加前沿的模型。現如今,芯片之間需要高效通信,內存需要統一尋址,數據搬運需要儘可能減少。簡單地把更多服務器堆在一起,行不通了。超節點的意義,就在於突破傳統單機的計算邊界,把更多芯片和內存納入一個高效協同的計算域,為前沿智能提供更大的“有效計算空間”。

浪潮信息發佈的元腦SD200 Ultra超節點AI服務器,正是圍繞這一目標設計。元腦SD200 Ultra以開放系統設計緊耦合128芯本土AI芯片,實現統一內存尋址超低延遲通信,並以對稱直連、算子優化等創新技術減少模型運行中的數據搬移與等待。基於這套系統,SD200 Ultra可以單機運行2.8萬億參數的Kimi K3,Token生成時延首次突破5.85毫秒。同時隨著模型參數規模不斷提升,還支持10萬億參數規模的前沿模型,為模型規模和上下文長度的持續擴展提供支撐。

從技術實現看,SD200 Ultra基於128芯本土AI芯片,採用3D HyperMesh架構,提供8TB帶寬和64TB內存,讓前沿模型能夠充分利用多顆芯片的計算與存儲資源。通信方面,原生內存語義通信把跨芯片通信時延降低到0.69微秒;在推理優化上,浪潮信息構建超級算子庫體系,將KDA、Gated MLA、MoE中的眾多基礎算子融合為計算+通信的大算子,算子數量降低為原先的1/11,大幅減少了Kernel Launch次數,HBM訪問開銷,並隱藏了通信延遲,提升GPU整體執行效率。今天,AI已經能夠解決困擾學術界幾十年的NS方程。

能力型智算要做的,就是讓這些前沿能力不只是實驗室裡的演示,而是可落地、可複製的生產力。二、向廣,讓智能供給“供得上、供得便宜” 如果說Capability解決的是“智能可以有多強”,那麼Capacity解決的是“我們究竟能夠擁有多少智能”。隨著Agent數量和使用深度增加,Token需求還會繼續快速增長。提高單位計算資源的Token產出,成為規模化供給的關鍵。然而,提高Token產出並不容易。推理不是一種單一計算模式。Prefill和Decode的計算特徵不同,Attention和MoE對計算與訪存的要求不同。多模態、MTP等模型架構的發展,還會帶來更多類型的計算負載。

簡單堆更多服務器,不僅不能帶來線性能力增長,還可能因為資源浪費、失衡和任務排隊,使部分算力長期閒置,另一部分資源持續緊張。這意味著,容量型智算需要換一種思路:讓不同的算力承擔最適合自己的負載,再通過統一的軟件棧把它們組織起來。浪潮信息的答案,是元腦HC2000多元算力機組。它面向持續、大規模推理需求,基於DirectCom 2.0極速架構,以原生液冷高密整機櫃為載體,按負載組織計算資源,實現多元算力協同。

其核心軟件棧MCIS建立了一套面向多元算力的協同機制:持續測量不同算力資源的能力與負載,根據任務需求動態分配算力,並在運行過程中實時調整資源配置,讓不同類型、不同規模的算力承擔更適合的推理任務。在硬件層面,HC2000採用全液冷設計和高通流供電,單櫃供電能力達到300千瓦以上,最大承載256張AI卡,算力密度實現4倍躍升。更重要的是其算力與計算特徵的精準匹配。通過不同組合,多元芯片各司其職,再通過軟件棧組織起來,共同完成推理協同,提升整個算力系統的Token產出效率。

在國產算力基礎上,通過MCIS和某模型適配,在典型Agent任務場景中,同等SLO約束下,相比單一算力構建的推理系統,實現了同等投資10倍Token產能提升。浪潮信息首席AI戰略官劉軍曾說:“智能的價值不僅取決於最高點有多高,更取決於有多少人能夠獲得它。” 向廣的邏輯,是要將先進推理能力通過效率提升和成本下降,快速走向更廣泛的用戶,讓智能從稀缺資源,逐步成為整個社會都能獲得的基礎能力。三、從Capability到Capacity,為什麼需要系統協同?SD200 Ultra和HC2000,一個向上,一個向廣。

看似在做不同的事情,但它們底層是同一個判斷:當智能開始被“生產”,算力產業的競爭就不再是單點競爭,而是系統競爭。劉軍將這種思路概括為“貫穿式創新”。第一個層面,是從芯片、服務器系統到模型的貫穿。過去做創新,是產業鏈每一層做好自己的事——芯片、系統、框架、算法、算子,然後縱向對齊;但在Agent AI時代,面向特定模型需要做定製化或專用化優化。第二個層面,是從單機到系統的貫穿。Capacity需要從前到後的創新,把鏈條上每一環節拿出來看,根據不同計算負載的特徵匹配最適合的計算資源。

Prefill可以用大算力芯片搭配供應和成本更優的LPDDR顆粒;對於Decode階段,可以選擇具有大容量HBM,兼顧顯存容量和帶寬的AI芯片。在此基礎上,在FFN計算環節,可以選擇3D DRAM堆疊芯片,進一步縮短數據搬運路徑。放棄用同一種通用巨無霸芯片幹所有事的策略,轉而構建多元芯片、多元算力系統。第三個層面,是從技術到生態的貫穿。以前理解“多元算力”,就是服務器廠支持不同家的AI芯片;但今天出現了新的協同方式:在同一個業務裡面有多元芯片,Prefill用A家芯片,Decode用B家芯片,構成一個算力系統。產業協作從“你贏我輸”的零和博弈,轉向開放共贏。

從更長週期看,Capability和Capacity並不是兩條平行線,而是一個循環。每一次新的智能能力出現時,往往首先是昂貴而稀缺的。隨著算法進步、系統優化和工程成熟,這些能力會逐漸以更低成本進入更多模型、應用和用戶。Capability負責創造新的可能,Capacity負責讓新的可能被更多人獲得。同時,更大規模的智能普及,又會帶來新的應用、新的數據、新的需求,推動下一輪Capability突破。系統協同,正是讓這個循環持續運轉的底層機制。

結尾:Agent時代,計算產業從提供算力走向生產智能 進入Agent時代,Token工廠不能只問擁有多少GPU、CPU,還應該問:這些算力能夠支撐多強的智能?能夠以多低的成本生產多少智能?浪潮信息用SD200 Ultra向上突破智能上限,用HC2000向廣推動智能規模化供給,一個負責讓AI更強大,一個負責讓AI更普及。連接兩者的,是系統級的協同創新與開放生態。今天的Capability,正是明天Capacity需要規模化供給的能力。Agent時代,計算產業的使命,也因此變得比以往任何時候都更寬廣。

Related

相關文章

4.7 萬條假名人內容被清:網信辦給 AI 換臉帶貨踩剎車

通報點名的四類典型,幾乎都奔著"變現"去:一是未經授權用 AI 仿名人肖像聲音、甚至盜用其家屬照片帶貨引流;二是盜肖像配 AI 特效編造"患病"等謠言誤導公眾;三是以第一人稱冒充名人發表觀點、情感話術誘人關注;四是生成名人跳低俗舞蹈、親密互動的畫面吸粉牟利,涉及微信、抖音、小紅書、B 站、快手等多平臺。

21 小時前7300
雷峰網模型更新

申通快遞和千問辦公達成戰略合作,推動物流服務智能化升級

今日消息,申通快遞與千問辦公正式達成戰略合作。雙方將圍繞快遞核心場景打造 AI 辦公體系,以Agent能力支撐申通快遞全國網點的增長戰略落地,推動AI從總部管理向末端網點規模化輸出,加速物流服務智能化升級。申通快遞總裁韓永彥與千問辦公CEO陳宇森等共同見證簽約。 圖示 申通快遞和千問辦公戰略合作簽約現場 申通快遞作為中國頭部快遞企業,擁有覆蓋全國的轉運、網點及末端派送網絡,聚焦快遞主業,為超過40個行業提供定製化解決方案,搭建一體化倉配供應鏈服務體系,網絡覆蓋廣、區域佈局縱深、網點多級協同運營,沉澱了深厚的快遞場景經驗與運營積澱。 面對鏈路長、協同要求高的物流場景,申通快遞對高效率、可落地、安全可控的企業級 AI 生產力工具存在深層次需求。千問辦公本次和申通快遞合作,將把 Agent 套件能力與申通快遞的行業經驗深度融合,共同打造快遞行業 Agent 規模化落地標杆,沉澱出可供整個物流行業持續複用的數字資產。 此前,千問辦公已在申通快遞安全管理、人力資源、行政運營等場景率先落地。以安全管理為例,過去員工的安全諮詢與預警動態均依賴人工處理;如今依託千問辦公,常見安全問題能由Agent自動響應,預警信息每日定時推送。此外,安全團隊還藉助千問辦公搭建管理後臺,將事件監控、實時臺賬與趨勢分析匯成統一視圖,推動安全管理從“被動響應”轉向“主動管理”。這一變化,也與申通快遞推動網點運營從“經驗驅動”向“數據驅動”轉型的方向一致。 未來,申通快遞將在全國網點推進千問辦公落地,重點提升網點管理與運營效率,並在電商場景共同打造智慧物流,幫助商家增強運營和服務能力,提升消費者購物體驗。 據公開資料,千問辦公是阿里旗下企業級通用Agent產品,是AI辦公賽道增長最快的產品之一,目前行業頭部企業均已接入千問辦公。

22 小時前
雷峰網模型更新

解讀丨王騰創業一年,正把小米模式搬進臥室

手機行業過去的最強“話題製造機”,這次沒聊手機。作者丨陳玘凡編輯丨吳優2026年10月29日,北京嘉瑞文化中心二樓。王騰站在臺上,手裡拿著一枚戒指。這一天,距離他正式離開小米,剛過去一年零五十天。手機行業曾經最會製造話題的市場操盤手之一,這次沒有講手機,而是以今日宜休之名發佈了兩個最"安靜"的產品:一枚智能戒指,一張以床笠形態加裝在床上的溫控系統。但問題是:在智能戒指已經殺成紅海、智能床罩由Eight Sleep佔據先機的賽道里,這兩款售價1799元起的戒指和9999元起的床笠,到底有什麼不一樣?

1 天前
雷峰網模型更新

獨家解讀 | 大疆老兵研發運動硬件,如何一年做出兩款產品?

成立兩年發佈兩款產品,累計融資千萬美元。作者丨陳玘凡 編輯丨吳優侯昊翔、曹曦、張津劍,三位 85 後頂流投資人的名字,出現在同一份股東名單上,本身就是一件值得琢磨的事。侯昊翔,厚雪資本創始合夥人兼總裁,福布斯 2024 創投人 100 榜上榜者,主導過壁仞科技等明星項目;曹曦創辦礪思資本(Monolith),投出了月之暗面、DeepSeek;張津劍與綠洲資本投出過MiniMax、逐際動力。把三位聯繫在一起的,是一家成立僅兩年半的運動科技公司皓翊星辰(LUMISTAR)。01造過 200 萬臺無人機的人,來造網球機皓翊星辰由厚雪資本孵化,日常經營交給專業團隊獨立運轉,核心成員來自大疆、字節、小紅書等公司。公司目前約80人,產研人員超過一半。網球發球機看似只是"一臺會發球的機器",實際是一門重結構的硬件生意。高速發球對機身強度、供球機構的可靠性、整機重量都提出了苛刻要求,任何一塊短板都有可能變成用戶手裡的故障。行業從業者告訴雷峰網·鯨犀,發球機殼體壁厚低於 2mm、被 70-80 公里/小時的球速擊打,很容易損壞,有網球發球機器人產品為追求便攜犧牲了結構強度,曾在體驗活動中被用戶打出的球擊破外殼。(想了解更多網球機器人行業內幕,歡迎添加作者微信 IvarQFC 交流)做網球發球機,需要一個結構能力過硬的研發負責人。皓翊星辰的硬件負責人正是結構工程師出身,擁有多年消費電子經驗。他曾參與研發 Mavic Mini 一代,這是大疆首個銷量破 200 萬臺的產品;還參與Insta360 GO系列拇指相機、雲鯨掃地機等產品。懂硬件的人來做網球機,落在產品上是一連串明確的取捨。公司此前有面向B端測試機,系統複雜且不可靠。團隊覆盤後轉向C端,核心洞察是“物理阻力”的問題。個人用戶買網球機,除去價格,最大的障礙就是把幾十公斤的機器從家搬到球場。誰把機器做得便攜、可靠、好用,誰就能打開C端市場。

1 天前