商湯大裝置首提TPW,重新定義AI基礎設施效能標尺
商湯科技近日首次提出一項名為「TPW」(Token Per Watt)的全新指標,試圖為AI基礎設施的效能評估建立一套更符合時代需求的新標尺。在Token經濟時代,如何用有限的能源與成本產出更多Token,已成為AI基礎設施必須面對的核心課題。隨著Token消耗量呈現指數級增長,算力需求持續攀升,也帶動AI資料中心(AIDC)用電量在整體社會用電結構中的佔比快速上升,能源效率因此成為決定競爭力的關鍵因素。過去,行業對AI資料中心的關注焦點往往集中在「誰擁有更多算力」,但如今焦點已開始轉向「誰能以更低成本、更高效率生產更多高質量Token」。
商湯此次提出的TPW概念,正是回應這一趨勢,將能源消耗與Token產出直接掛鉤,強調在單位電力下所能生成的Token數量,作為衡量AI基礎設施真實效能的指標。這不僅是技術層面的重新定義,也反映出AI產業從單純追求算力規模,轉向更重視資源利用效率與永續發展的思維轉變。Token是AI模型處理資訊的基本單位,從文本生成、程式碼輔助,到圖像辨識與多模態理解,每一次AI運算都涉及大量Token的生成與消耗。近年來,隨著大型語言模型與生成式AI的快速普及,Token消耗量呈現爆炸性成長,這對底層算力與能源供應提出前所未有的挑戰。
傳統上,評估AI基礎設施效能多以算力(如FLOPS)或模型參數量為核心指標,但這些指標並未直接反映能源消耗與實際產出之間的關係。在當前全球關注碳中和與永續發展的背景下,單純追求算力規模已難以滿足效率與成本的要求。TPW的提出,正是將焦點從「算力大小」轉移到「能源效率」,讓業界能夠更直觀地比較不同基礎設施在相同電力成本下能產出多少Token,進而引導資源往更高效的方向配置。對於AI資料中心運營商而言,電力成本往往是營運開支的最大宗,如果能以更少的電力產出更多的Token,就能顯著降低單位成本,提升競爭力。而對於終端用戶,這也意味著在相同預算下能獲得更多、更優質的AI服務。
商湯科技作為領先的AI平台公司,長期深耕AI基礎設施建設,其大裝置平台已為眾多企業提供算力服務。此次提出TPW,不僅是技術創新,更展現了對行業標準的引領企圖。透過這個指標,商湯希望推動整個AI產業更加重視能源效率,促進綠色AI的發展。同時,TPW也能幫助客戶更精準地評估投資回報,因為在實際運營中,單位電力下的Token產出直接關聯到服務成本與定價能力。從產業趨勢來看,全球AI資料中心的用電量正在快速攀升,各國政府與企業都開始關注資料中心的能源消耗與環境影響。在這樣的背景下,一個能夠同時衡量產出與效率的指標,無疑具有重要的參考價值。
TPW的出現,讓業界不再僅比拼算力規模,而是更關注如何以更少的能源與成本創造更多的價值。這不僅是技術進步的體現,更是AI產業邁向成熟與永續的關鍵一步。值得注意的是,TPW作為一個新提出的指標,未來還需要業界共同驗證與完善。例如,Token的品質與類型如何納入評估,不同模型與應用場景下Token生成效率的差異,都是需要持續探討的課題。但可以確定的是,商湯此舉為行業樹立了一個新的思考方向,促使更多參與者從能源效率的角度重新審視AI基礎設施的設計與運營。在實際應用層面,TPW的導入將有助於AI資料中心進行更精細化的能效管理。
透過監控單位電力下的Token產出,運營團隊可以即時調整硬體配置、冷卻系統與工作負載排程,以達到最佳效率。這也將間接推動硬體廠商開發更節能的AI晶片與伺服器,形成良性循環。長期來看,TPW有望成為類似於資料中心PUE(電力使用效率)的關鍵指標,但更聚焦於AI運算的實際產出。商湯科技此次提出的TPW,不僅是技術層面的創新,更是對AI基礎設施評估標準的重新定義。隨著Token經濟時代的來臨,如何以有限的能源與成本產出更多Token,已經成為所有AI從業者必須面對的核心課題。商湯透過這個新指標,向市場傳遞了一個明確的信號:未來的競爭將不再是單純的算力軍備競賽,而是效率與永續性的綜合較量。
這也為整個AI產業的發展方向提供了新的啟示。
Related
相關文章

消息稱 Anthropic 與 Fractile 達成初步供應合同,後者尋求 65 億美元估值
作者:溯波(實習) 責編:溯波 評論: 8 月 20 日消息,彭博社當地時間昨日報道稱,AI 芯片初創企業 Fractile 已就一項總價值約 2.5 億美元(注:現匯率約合 16.87 億元人民幣)的供應合同與 Anthropic 達成初步協議。
Counterpoint:未來五年超 1.3 億顆先進封裝 AI 芯片出貨,英特爾挑戰臺積電
市場研究機構 Counterpoint 今日發文,AI 加速器的出貨量將大規模推動先進封裝的需求:預計未來五年內,將有超過 1.3 億顆 GPU / AI ASIC 芯片採用先進封裝的片上計算內存。
英偉達15億美元鎖算力
英偉達近期傳出將投入 15 億美元,針對其旗下高效能運算產品的算力進行鎖定。這項消息由知名科技自媒體「」率先披露,引發市場關注。據了解,「鎖算力」一詞在業界通常指透過硬體或軟體機制,限制特定晶片執行某些運算任務(例如加密貨幣挖礦)的能力,或確保該算力僅能用於合約指定的客戶與場景。

黃仁勳:OpenAI 承諾在 2030 年前部署約 12GW 英偉達算力
作者:清源 責編:清源 評論: 感謝網友 西窗、補藥吖 的線索投遞!8 月 17 日消息,英偉達 CEO 黃仁勳今天(17 日)晚間通過官方博客撰文稱,OpenAI 已承諾在 2030 年前大規模部署英偉達 AI 基礎設施。OpenAI 現有和計劃中的部署承諾合計約為 12GW(吉瓦)英偉達算力;如果英偉達將 PORTS-Pike 合作擴大到首期 4.