辦了33年的ACM MM，重新劃定研究範圍

隨著AI的發展，多媒體的研究邊界在進一步拓寬。作者丨張 馳 編輯丨馬曉寧 今年11月10日，國際多媒體領域頂級學術會議 ACM Multimedia（ACM MM）將在巴西里約熱內盧舉行。屆時也前往大會現場，帶來第一手的報道。歡迎掃描文末二維碼入群與我們交流。與往年相比，這屆會議有一個容易重大的變化，徵稿主題被重新劃分了。在去年底，ACM MM學術指導委員會投票通過新的研究主題體系。過去的五大主題、15個子方向，改為16個平級研究主題。看上去只是調整分類，但對照新舊名單看的話，可以發現部分研究被放到了更醒目的位置。對比之後，我們發現了幾個顯著的變化。

01新增具身智能與多模態推理最值得注意的是兩個新增的獨立主題：具身與沉浸式多媒體（Embodied and Immersive Multimedia）和多媒體推理（Multimedia Reasoning）。前者的官方定義，特別提到能夠在真實世界感知、行動和交互的智能體，以及視覺、語言、音頻和觸覺等多種信息的整合。不過這也不是說，ACM MM 在轉型成機器人會議，它強調的是具身智能中的多媒體、多模態研究，不是機器人硬件、控制、運動規劃問題。傳統的多媒體研究主要處理圖像、聲音、視頻等內容，具身系統需要將多模態感知與行動聯繫起來。

多媒體推理則強調對圖像、視頻、語音和文本，進行邏輯、因果、時間與空間推理。例如，模型不僅要識別視頻中發生了什麼，還要判斷事件為什麼發生、不同線索之間有什麼關係，以及畫面沒有直接給出的信息。過去的多媒體AI更強調從內容中提取信息，現在大會應該是想把基於多模態證據進行推理的研究，單獨凸顯出來。不過，“理解”和“推理”也不是完全分離的，過去的研究也涉及推理。02從視覺與語言，到多媒體與語言另一個變化是，2025年的“視覺與語言”（Vision and Language）被調整為“多媒體與語言”（Multimedia and Language）。

新描述中，除了圖像和視頻，還明確納入音頻、傳感器數據與語言的結合。與此同時，原先分別設置的“多媒體基礎模型”和“生成式多媒體”，在2026年合併為“多媒體生成與基礎模型”。大會不再將基礎模型與內容生成完全分開討論，而是強調二者在模型架構、跨模態對齊，還有可控生成中的聯繫。這些都反映出，多媒體所處理的信息種類在擴展和融合。03從談影響，到擔責任2025年有個主題叫“生成式AI的社會影響”（Social Aspects of Generative AI），在2026年變成了“負責任的多媒體”（Responsible Multimedia）。

從強調社會影響，到強調責任，意思很明顯，AI 的影響已經是真真切切的，現在要考慮的是如何控制這種影響。就像前兩年會有討論，AI生成的假視頻會不會誤導公眾？現在更應該考慮的是如何消除這種誤導。此外，“多媒體解釋”（Multimedia Interpretation），調整為“多媒體可理解性與可解釋性”（Multimedia Interpretability and Explainability）。Interpretability和Explainability這兩個詞含義相近，也沒有統一的區分標準。一般來說，前者更關注能否理解模型內部的工作機制，後者則強調能否解釋模型作出某個判斷的依據。

這其實反映出，AI已經越來越多地參與判斷與決策，甚至自己做研究（比如最近熱議的RSI遞歸自進化），讓它僅僅給出結果已經不夠，我們還需要知道這些判斷從哪來，是否靠得住。04多媒體變了嗎？ACM MM創辦於1993年。當時的多媒體研究，關注的還是一些相對基礎的問題：如何在計算機中存儲、傳輸和同步圖像、聲音與視頻，如何檢索和組織這些內容。2004年，大會將研究劃分為內容、系統和應用三大方向。後來，互聯網、移動設備和深度學習的相繼崛起，多媒體檢索、內容理解、人機交互等研究也不斷演進，會議的研究範圍也隨之擴展。近幾年，這種變化進一步加快。

2024年，ACM MM專門增加了“生成式AI時代的多媒體”主題；今年，具身智能、多模態推理等方向又被單獨列出。這三十多里，ACM MM研究的基本圍繞如何處理和利用不同形式的信息。隨著AI的到來，研究的問題也有了進一步的變化，從如何存儲、傳輸和檢索多媒體內容，到如何理解、生成內容，再到讓機器基於多模態信息進行推理、判斷，甚至與現實環境交互。2026年的這次調整，其實不是說傳統多媒體研究正在退出舞臺，而是隨著AI的發展，多媒體的研究邊界在進一步拓寬。參考來源：ACM Multimedia 2025 Topics of Interest：https://acmmm2025.

org/research-topics/ACM Multimedia 2026 Topics of Interest：https://2026.acmmm.org/site/topics.html