為Agent全生命週期量身定製!海光掏出全家桶方案,打通Agent落地每一層

2026年11月13日 10:34
站內 AI 整理稿

作者 | 程茜 編輯 | 漠影 一場由智能體驅動的應用變革,正在撬動AI底層算力體系重塑。今年9月,IDC發佈的《2026年中國人工智能計算力發展評估報告》給出一組關鍵預判:全球AI算力需求滿足率自2024年79%持續下行,2027年跌至71%的谷底,直至2030年才回升至77%。有一個簡單邏輯可以概括算力消耗的變化:Token消耗量≈多智能體協同×單智能體資源消耗×單任務執行次數。智能體的持續運行模式,正在持續放大AI基礎硬件的負載壓力。

▲2026年中國人工智能計算力發展評估報告(圖源:IDC) 這催生了AI應用和底層算力之間新的矛盾:智能體需要長週期推理、反覆多輪規劃、高頻工具調用、多任務動態調度,這套運行特徵對AI基礎設施提出了一套全新、非標準化要求,不再只追求FP16峰值算力,而是對時延、吞吐、訪存、任務調度、穩定性提出新約束。那一套什麼樣的基礎設施,才能成為Agentic(智能體原生)時代的最優解呢?智能體長流程、多輪調用、頻繁讀寫數據的特性,印證了一個早期的行業共識,AI競賽已不是單芯片算力的比拼,GPU集群之外,CPU節點、存儲節點的價值正在被重新定義。

在這樣的背景下,我們將開啟一個系列專題,順著智能體思考、編排、推理、記憶、執行的完整鏈路,去探討異構算力分工、安全隔離、分層存儲、交付形態、全棧可控等底層命題,回答智能體規模化落地對AI基礎設施提出的新考題。一、拆解智能體工作閉環,性能天花板藏在五大環節裡 智能體已經深入我們生活、工作的方方面面。

像當下爆火的個人AI助手,丟任務就能自動拆解、調用工具生成完整報告或PPT;編程智能體接收到自然語言描述的需求,分分鐘就能幫你開發應用;視頻智能體憑藉幾句話指令,就能幫你完成腳本策劃、畫面生成與成片剪輯…… 相比於百模大戰階段,智能體的競爭不僅限於模型,而是要延伸到整套體系能力的比拼,基礎設施需要分別適配不同負載。

模型層是智能體的大腦,負責感知信息、推理判斷、拆解規劃,並思考如何調用工具;Harness執行層承接模型輸出的指令,完成任務編排、記憶管理與工具調度;知識庫是智能體的信息養料,通過讀取企業私有數據、文檔與業務資料,為模型輸出提供可靠事實支撐;工具層是智能體執行動作的手腳,既可以調用已有系統能力,也能按需生成新工具;沙箱則作為安全隔離層,把智能體和真實業務系統隔離開。在這套架構之上,智能體運行會形成接收多模態輸入、思考推理、任務編排、工具調用、記憶檢索的閉環,並循環推進。這也使得底層基礎設施的負載特徵面臨三大顯著變化。

首先,負載不再是一次性生成即結束,其任務是長鏈路、多輪次的,會伴隨大量狀態讀寫,對算力、存儲的持續性佔用模式和傳統大模型推理請求完全不同。其次,任務調度具備不確定性,執行分支會動態衍生,難以提前預判流程。這就要求基礎設施具備彈性調度能力,能夠應對意料之外的工具調用、分支跳轉。第三就是對基礎設施的可靠性要求更高,智能體任務往往要連續執行數十步,一旦中間任意環節出現推理異常、調用超時、資源中斷,會導致整條業務鏈路失效,重試成本、業務損失更高。由此可見,智能體的能力上限,不再只由模型算法、峰值算力決定,底層基礎設施架構能不能適配新負載成為隱性天花板。

二、智能體熱潮之下的隱性瓶頸,亟需分層解耦算力 那當下的AI基礎設施,能完全適配這一波智能體熱潮嗎?答案是否定的。現有基礎設施大多是為百模大戰時期的單次生成場景設計的,對智能體這種間斷、隨機、高訪存的長任務,資源利用率較低,對於隨時變化的任務分支,預先規劃好的算力池很容易出現局部算力擁堵或是資源閒置。再者,現有體系的容錯機制較為單薄,當智能體跑了幾十步之後出現故障,容易拉高時延與算力浪費,在企業業務場景裡還會帶來業務風險。

在智能體應用層出不窮的當下,催生了應用方與底層基礎設施廠商深度協同的剛需:基礎設施廠商不再只簡單交付芯片、服務器這類硬件,其既要向下打磨硬件底座,也要向上深度適配智能體完整工作流。智能體整條鏈路裡,不同階段對硬件資源的訴求完全不一樣,這就需要按任務特徵做差異化的資源匹配。例如推理、多模態生成環節,對顯存容量與帶寬要求極高;DAG任務編排、循環自檢、沙箱內工具調用,包含大量分支判斷、狀態持久化、外部接口IO交互,更看重CPU併發能力與內存;向量檢索、知識庫查詢、長上下文KV緩存路由屬於高吞吐隨機檢索負載,更適合存儲優化型節點。

算力分層解耦後就不需要為統一架構妥協,避免出現高價顯卡空轉、檢索環節資源擁堵的錯配問題,讓整個智能體鏈路持續、低成本、穩定地跑完從目標輸入到結果交付的完整閉環。三、海光掏出Agentic時代最新佈局:國產底座、模塊化節點、私有化部署 伴隨上面智能體對算力提出的新需求,落腳到底層基礎設施企業的視角,它們的角色正發生變化,從單一的算力硬件供應商轉向全棧協同夥伴。此前是大模型提供商去適配現成算力,未來或演變為基礎設施底座跟著上層智能體負載迭代,雙向迭代。對絕大多數算力廠商而言,同時補齊CPU高併發、DCU推理加速、分層存儲、安全沙箱並不容易,但這條能力曲線,恰好是海光過去數年持續深耕的主線。

我們從即將發佈的基於海光路線的系列整機產品,可以洞察到海光服務器在智能體時代的新思考:聯動產業鏈上下游夥伴,打造適配Agentic時代的完整產品組合。這套思路可以歸納為面向智能體落地的兩條產品路徑:一條面向雲端與大型數據中心,主打模塊化節點組合的數據中心產品方案。整套方案包含智能體編排沙箱節點、LLM推理節點、向量庫及記憶節點三類專用節點,各司其職、協同調度,支持業務按需彈性擴縮,適配大規模智能體集群運營。

其中智能體編排沙箱節點以CPU為核心,單節點可承載上千個智能體併發運行,支持CSV文件處理,提供隔離可靠的沙箱執行環境;配備16路內存通道、支持2DPC,能保障智能體高頻狀態讀寫、本地記憶存取的性能需求。LLM推理節點可適配OAM模組、高密度多卡集群、超節點等多種形態負載,釋放更高GPU算力與Token吞吐,兼容主流GPU硬件與大模型。向量庫及記憶節點採用熱溫冷分佈式存儲架構,覆蓋全閃、混閃、大容量歸檔存儲分層,為AI原生場景設計。

雲端集群解決的是海量智能體併發、彈性調度的規模化難題,但大量政企、金融、製造場景,還有強合規、數據不出園的剛性約束,這就催生第二條交付形態,面向企業私有化場景的AgentServer Flex智能體算力矩陣。其單套配置由3–9臺編排/LLM/存儲節點組成,支持按需組合、彈性擴展,可快速對接軟件夥伴鏈條,支持終端客戶快速上線交付。這樣的私有化方案能保障數據本地留存、不出園區,兼顧安全合規訴求,同時壓縮企業部署週期、降低集成與運維成本。這整套方案還有一層關鍵底座保障,其依託國產CPU+國產DCU搭建,對齊主流x86性能基準,從而實現從芯片到整機櫃的全鏈路自主可控、交付確定性。

智能體浪潮真正的底層變化,是算力需求從單一模型推理擴展成一套包含調度、思考、記憶的複合負載。過去一套通用算力集群包打一切的模式,很難兼顧推理吞吐、IO併發、記憶檢索等完全不同的負載。海光這套分工清晰的數據中心產品組合,回應的正是對智能體全鏈路的差異化訴求。結語:從對話到自主執行智能體,正重新定義AI基礎設施 智能體浪潮帶來的變革,遠不止一個個自動執行的AI助手,它正在重塑整條AI產業鏈上下游的合作關係。當AI應用側的需求規模化,上層創新與底層基礎設施的深度協同,就不再是加分項,而是必選項。

在這一行業背景下,我們將開啟系列專題,以海光這套面向Agentic時代的全新產品組合為觀察樣本,一步步拆解當AI從對話生成走向自主執行,下一代基礎設施到底需要具備哪些核心要素。

Related

相關文章

智東西AI Agent

蹲守北京黑客松現場:機器人主持婚禮、變臉,60支極客小隊連夜攢局手搓Demo

作者 | 程茜 編輯 | 漠影 60支隊伍、40+小時,一場充滿想象力的極客盛宴在中關村上演。 現場圍觀機器人主持婚禮、表演變臉;戴上眼鏡能實時識別飛鳥,也可以用AI眼鏡輔助聽障群體教學實操;各類Agent即將奔赴外貿、教育場景落地試用。 這些腦洞十足又緊貼真實場景需求的作品,都來自剛剛收官的Junction China 2026國際極客嘉年華。 作為歐洲極具影響力的老牌國際黑客松品牌,Junction此番首次落地北京,共設置了AI、機器人和可穿戴設備三條賽道。

1 小時前
雷峰網AI Agent

靈睿智芯完成數億元Pre-A+輪融資,產業資本密集押注

本文作者: 陳悅琳 2026-11-13 09:52 導語:目前,基於P100的智能體CPU研發正緊鑼密鼓推進,並與國內頭部系統廠商達成合作意向。近日,上海靈睿智芯計算技術有限公司(以下簡稱“靈睿智芯”)宣佈完成數億元Pre-A+輪融資。本輪融資由美團戰投領投,京東關聯基金、乾杯基金、力合算芯基金(東方算芯CVC)、鈞犀資本、商湯國香資本、尚頎資本(上汽CVC)、深信服科技的產業投資基金琥珀資本等頭部產業資本和眾多老股東跟投。

11 小時前
智東西AI Agent

B2A崛起!Agent 14大應用與Infra賽道一文看懂

編譯 | 江宇 編輯 | 漠影 11月12日消息,近日,硅谷知名風投機構a16z官網刊文《Welcome to the B2A Economy》(歡迎來到B2A經濟時代),提出新判斷:AI Agent正在成為互聯網的主要用戶,企業未來不僅要爭奪人類消費者,還要爭奪AI Agent帶來的流量和訂單。

1 天前
智東西AI Agent

千億美元AI雲市場,算力軍備競賽之後拼什麼?

作者 | 三北 編輯 | 漠影 近日,一位智算雲企業的工作人員告訴,最近半年,客戶的需求點發生了顯著變化:過去他們問“一張卡多少錢、能租多久”,現在問題變成了“一百萬Token花多少錢、任務能不能穩定跑完”。 問題的變化,折射出AI基礎設施的一次重要升級。 全球AI雲市場仍在高速擴張。知名行研機構Gartner預計,到2030年AI雲市場將達到2670億美元(約合人民幣1.78萬億元),其中新雲(NeoCloud)廠商有望拿下其中20%的份額,後者也是一個3500億元人民幣級別的市場。

1 天前