全SOTA!不止純文本,阿里多模態站上全球第一梯隊

2026年8月21日 09:05
站內 AI 整理稿

作者 | 李水青 編輯 | 漠影 8月21日報道,過去一個月,阿里巴巴模型發佈全面提速,大語言、圖像、語音、視頻、音樂五大類模型密集完成重要版本迭代,性能均躋身國際第一梯隊。有業內人士評價,多模態是下一代智能的範式。阿里在多模態上的佈局節奏,遠比市場感知的要快。模型密集迭代的另一面,是模型能力開始與雲基礎設施的增長形成更緊密的聯動。2027財年第一季度(對應2026年4月1日-6月30日),阿里雲外部商業化收入增速提升至45%,創下22個季度新高。AI雲及算力服務收入484.37億元,經調整EBITA達到56.28億元,同比暴增133%。AI相關產品收入123.

76億元,連續第12個季度保持三位數同比增長。在AI進入價值兌現期的當下,多模態也正在從模型榜單上的“能力補齊”,走向更廣泛的產業場景,成為觀察阿里AI進展的一條重要暗線。一、阿里AI不只有語言模型,多模態全面開花 剛剛過去的一個月,阿里在模型發佈上按下了加速鍵。大語言模型方面,8月發佈的Qwen3.8-Max總參數達到2.4萬億,在當時編程競技場CodeArena排名全球第三,在Artificial Analysis Agentic榜單登頂全球第一。Qwen3.8-27B開源僅兩天,下載量就突破100萬次。截至8月,阿里累計開源模型超過460個,Qwen系列全球下載總量突破30億次。

芯片廠商和推理框架也在快速跟進。平頭哥、英偉達、AMD、沐曦、聯發科、摩爾線程等國內外芯片廠商Day0適配Qwen3.8,vLLM、SGlang、Ollama等開源社區第一時間優化推理框架。Qwen已經成為全球AI產業鏈的基礎件之一。但把時間線拉長到整個季度,會發現更密集的變化其實發生在多模態。6月22日,視頻生成模型HappyHorse 1.1發佈,重點升級動態表現力、主體一致性、指令遵循、視覺質感和音頻能力。7月21日,Qwen-Image-3.0發佈。它支持最長4.5k Token輸入,可生成包含公式、幾何圖形、邏輯推導的知識圖解和複雜UI,同時支持12種語言、20多款字體原生渲染。

8月5日,該模型登上Arena.ai文生圖榜單國內第一。語音方向同樣連續更新。7月,阿里連續發佈實時語音識別模型Fun-ASR-Realtime、實時語音交互對話模型Qwen-Audio-3.0-Realtime,以及語音識別模型Qwen-Audio-3.0-ASR-Flash。Qwen-Audio-3.0系列的ASR、TTS、Realtime三類模型在Artificial Analysis今年7月的相應語音榜單中均拿下全球第一。8月6日,Wan3.0公測,單次視頻生成時長達到30秒,並首次在文本、圖片、音頻、視頻之外支持doc、xls、ppt、pdf、md等文檔輸入。

8月17日,AI音樂模型HappyShrimp上線,可以完成從作詞、作曲、編曲到演唱的端到端整麴生成。甚至在更前沿的世界模型方向,阿里也已經推出HappyOyster 1.0,能夠根據一句話或一張圖生成可互動、可探索、可實時改變的數字世界。語言、圖像、語音、視頻、音樂、世界模型,一張覆蓋越來越完整的模型版圖已經浮現。模型能力的擴張,也正在體現在收入端。財報電話會上,阿里透露,本季度,阿里AI相關產品ARR突破495億元,包括MaaS在內的模型與應用服務收入(ARR)突破160億元人民幣。至少從財報看,模型已經從技術投入逐漸變成一項規模化收入來源。

二、從榜單到場景,多模態開始走進產業一線 大語言模型的商業化路徑正在變得清晰。Anthropic靠Coding能力打開高價值企業市場,Cowork進一步把模型帶入真實工作流。Qwen3.8在編程和專業辦公能力上的大幅提升,正是沿著這條被驗證的路徑推進,從而獲得市場的初步認可。但市場可能忽略了一點,多模態也已經跨過模型炫技階段,開始進入一線商業化場景。語音模型正在重新成為AI時代的人機交互入口。Qwen-Audio正進入會議紀要、智能客服、車載助手、智能硬件、教育等高頻場景。相比單純聊天,這些場景擁有更明確的調用頻次、付費主體和ROI。

Fun-ASR-Realtime支持16種方言和30種語言,首字延遲在百毫秒級別,已經具備大規模商用條件。圖像和視頻模型更貼近內容生產產業鏈。Qwen-Image-3.0已將複雜UI設計、多語言海報製作、知識圖解等商業素材作為重點能力,支持12國語言和20多款字體原生渲染。Wan 3.0覆蓋廣告創意、影視製作、短視頻生成、電商素材生產等環節。HappyShrimp則把生成式AI版圖進一步推向音樂創作市場。科技媒體Semafor報道,Pinterest的AI購物助手和聊天機器人採用了阿里Qwen大模型。

Pinterest CEO在財報會上表示,使用開源模型的成本不到Anthropic、OpenAI等同類閉源模型的8%。他直言,任何不用開源模型的CEO,幾乎都在浪費股東的大量資金。AI對阿里核心業務的反哺也在加速。千問App深度集成淘寶天貓、淘寶閃購等生態,上線以來已有2.5億用戶通過其智能體功能實現AI驅動的購物體驗。AI正在從技術能力轉化為真實的商業場景。三、能力越補越齊,阿里多模態的價值開始顯現 AI真正進入產業後,客戶需求天然就是多模態的。佈局多模態模型,有望幫助阿里覆蓋更多需求,消耗更多雲資源,帶動更多配套服務。首先,多一個模態,對應的往往就是一類新的需求和一批新的客戶。

比如,一家汽車公司既需要語言模型理解指令,也需要實時語音完成交互;影視、遊戲、廣告行業的需求則天然橫跨文字、圖片、聲音和視頻。其次,多模態任務還會產生更重的計算需求。高清圖片、長視頻、實時語音等業務,對GPU、存儲和網絡的要求都會隨之提高。阿里財報也提到,AI應用的部署、訪問和持續運行,正在直接帶動計算、存儲、網絡等通用雲資源需求增長。此外,當一個客戶同時使用文本、圖像、視頻和語音模型後,需求鏈條還會繼續延伸到數據處理、模型微調、數據庫、對象存儲、安全等環節。原本的一次模型調用,可能變成一整條AI生產鏈,也有望進一步提升客戶黏性和綜合客單價。

而支撐這套模型體系持續向前的,是阿里近幾年不斷加厚的全棧AI底座。在組織層面,今年3月,阿里成立Alibaba Token Hub事業群,由吳泳銘直接負責,以“創造Token、輸送Token、應用Token”為核心目標重新整合AI業務。芯片層面,阿里自研真武AI芯片已經通過阿里雲服務進入20多個行業、超過650家外部客戶,覆蓋訓練、微調和推理等AI工作負載。吳泳銘在財報會議中提及,阿里正在數據中心大規模部署自研倚天/真武體系芯片,並希望逐步替換外購商業芯片,以提高AI雲毛利率。基礎設施層面,阿里雲持續擴張全球AI數據中心佈局,擴建完成後將覆蓋30個地域、104個可用區。其新一代CUBE 5.

0架構已將大型AIDC數據中心交付週期壓縮至100天,建設成本較上一代降低約10%,今年還計劃將模塊化數據中心全球產能提升兩倍以上。結語:AI進入兌現期,多模態價值正在被重新認識 過去兩年,Qwen的純文本語言模型幾乎是外界觀察阿里AI的第一窗口。但這其實只是冰山一角。在大眾視線之外,阿里的多模態模型(圖像、語音、視頻、音樂等)正在密集迭代。阿里的 AI 版圖,早已從單一的語言模型,擴展為更完整的多模態智能體系。隨著AI從聊天走向內容生產、辦公、電商和真實世界交互,多模態的重要性還會繼續上升。對阿里而言,這既是一場模型能力的補齊,也是一條正在進入產業深水區的新主線。

被低估的多模態,正在走到臺前。

Related

相關文章

MarkTechPost AI生成式AI

認識 Voxel51 3.0:為實體 AI 打造的統一多模態資料平臺

Voxel51 已發布 Voxel51 3.0,這是其資料平臺的一次重大更新。Voxel51 3.0 是一個端對端的多模態資料平臺,將搜尋、篩選、標註和評估整合於單一系統中。該平臺鎖定針對機器人、車輛和工廠感測器資料進行模型訓練的團隊。此次發布新增了 Voxel51 Agent、資料溯源層及免費的自助式存取。重點摘要:規模:Voxel51 Agent 內建超過 45 個 MCP 工具、80 多個運算子及 18 個開源技能。執行環境:可於 app.voxel51.com 使用託管網頁應用程式,或於雲端、混合、地端及隔離環境中自行部署。未揭露本機 GPU 需求。效能:未發布產品基準測試。Voxel51 引用其自身調查數據作為依據。最佳亮點:免費方案包含 Voxel51 Agent、每月 30,000 次推論請求及 30 個運算小時。

21 小時前
何夕2077生成式AI

下一概念建模把文本生成提速最高31倍

斯坦福等聯合提出全新文本生成範式 NCM,生成速度狂飆 31 倍AIbase基地發佈於AI新聞資訊 · 1 分鐘閱讀 · Oct 16, 202633人工智能領域的文本生成技術迎來顛覆性創新。斯坦福大學與 Together AI 的研究人員近日聯手推出了一種截然不同於傳統自迴歸和擴散模型的全新文本生成範式——Next-Concept Modeling(簡稱 NCM,即“下一概念建模”)。該方法巧妙借鑑了圖像生成領域中“下一尺度預測”的思路,有望為未來的文本生成技術開闢全新的發展路線。在技術實現路徑上,NCM 模擬了人類“先構思宏觀大綱、再動筆填充細節”的寫作邏輯。整個系統通過兩階段訓練來完成:首先訓練多尺度殘差 VQ-VAE,從而得到能夠逐層補充信息的多層離散文本編碼;隨後凍結該系統,訓練 Transformer 模塊去預測下一層的編碼。在生成文本時,模型會先並行生成概念層面的宏觀大綱,接著逐層並行填充具體細節,最終組合成完整的文本內容。在實際測試表現中,NCM 交出了令人矚目的成績單。實驗數據顯示,在保持相近甚至更優生成質量的前提下,NCM 相對傳統的擴散語言模型實現了10到31倍的生成速度飛躍,並且在訓練過程中所需消耗的 token 數量也大幅減少。此外,在數獨等複雜推理任務上,它的表現也明顯優於傳統的自迴歸和擴散基線模型,同時還支持通過多生成候選挑選機制來進一步優化最終輸出效果。儘管目前該研究所使用的模型參數規模依然相對有限,其在擴大模型規模後的表現、精確文本以及長篇內容的生成能力仍有待後續驗證,但這一創新思路無疑打破了長期以來的技術慣性,為人工智能高效生成文本提供了充滿想象力的全新解法。本文來自AIbase日報掃碼查看歡迎來到【AI日報】欄目!這裡是你每天探索人工智能世界的指南,每天我們為你呈現AI領域的熱點內容,聚焦開發者,助你洞悉技術趨勢、瞭解創新AI產品應用。

1 天前
雷峰網生成式AI

12.88萬起、華為電驅+L4同源智駕,Ray7能成為埃安年輕化的答卷嗎?

12.88萬起、華為電驅+L4同源智駕,Ray7能成為埃安年輕化的答卷嗎? 本文作者: 倪萍 2026-10-17 22:42 導語:10月17日,埃安轎跑Ray7正式開啟預售,預售價12.88 萬起。新車車長4.9米,軸距2.9米,車頭部分搭配3.25米的超長雙環燈帶,是埃安10年煥新的家族 10月17日,埃安轎跑Ray7正式開啟預售,預售價12.88 萬起。新車車長4.9米,軸距2.9米,車頭部分搭配3.25米的超長雙環燈帶,是埃安10年煥新的家族式標識。 新車採用寧德時代電池以及廣汽自研的彈匣電池2.0技術,能夠在充分釋放續航能力的同時,監控電池健康狀態。提供45.58kWh和62.98kWh兩種規格,續航可達702公里,整車風阻係數 Cd 低至 0.22。Ray7搭載華為DriveONE多合一電驅,以及華為DriveONE芯片級驅制融合架構,百公里制動僅為32.8米。底盤方面,Ray7搭載高性能前後穩定杆和後五連桿懸架,過彎極限更高,濾振更乾淨。智能化上, Ray7搭載27顆車規級全視角傳感器,採用文遠知行L4級Robotaxi同源大模型。這幫助新車能夠複用 L4 積累的海量場景經驗,在城區掉頭、繞行等複雜場景中可順利通行。自2025年廣汽推進“番禺行動”以來,昊鉑埃安BU的研發、生產、銷售等環節效率不斷提升,產品迭代和新車投放節奏明顯加快。作為埃安全新Ray車系的首款新車,Ray7是埃安開啟年輕化序列的關鍵落子,也是廣汽切入20萬級市場的重要佈局。這一細分市場競爭並不輕鬆:小鵬P7、極氪007等車型已經提前卡位。Ray7想在年輕人心中佔位,不能只堆參數,更要把智能座艙與輔助駕駛、三電安全、補能效率、用車成本和價格權益上的差異,變成用戶可感、可信、可持續的體驗,這才是埃安年輕化的分水嶺。(雷峰網(公眾號:雷峰網)) 雷峰網原創文章,未經授權禁止轉載。詳情見轉載須知。

1 天前
智東西生成式AI

梁聖又掀桌了!DeepSeek新模型斬殺GPT-6,許願式編程時代降臨

作者 | 楊京麗 編輯 | 李水青 10月17日報道,剛剛,DeepSeek V4.1 Flash更新至V4.1-Flash-1017版本,官方網頁端、App與API已同步更新至新模型,模型權重也已在HuggingFace和ModelScope開放下載。DeepSeek還向公眾開放自研搜索引擎的Search(搜索)與Fetch(抓取)API,兩個接口均定價為5元/千次。 此次更新距離該模型發佈僅過去一個多月。9月10日,DeepSeek正式推出V4.1-Flash,在性能上超越了DeepSeek-V4-Pro。

1 天前