全天候科技生成式AI

字節推出SeedRealtime音視頻全雙工大模型,已在豆包App全量上線

2026年8月5日 17:38
字節推出SeedRealtime音視頻全雙工大模型,已在豆包App全量上線

重點摘要

字節跳動近日正式推出名為 SeedRealtime 的音視頻全雙工大模型,該模型已於旗下 AI 對話產品豆包 App 中完成全量上線。這項新技術讓用戶在與 AI 互動時,能夠同時進行語音與視訊訊號的即時收發,不再需要等待一方說完再回應,實現更接近人類自然對話的雙向交流體驗。

站內 AI 整理稿

字節跳動近日正式推出名為 SeedRealtime 的音視頻全雙工大模型,這項技術已經在旗下 AI 對話產品豆包 App 中完成全量上線。用戶現在打開豆包 App,就能體驗到語音與視訊訊號同時收發的即時互動,不再需要等待一方說完才能回應,對話過程更接近人類自然交流的雙向節奏。SeedRealtime 的關鍵突破在於「全雙工」架構。傳統的語音助手或 AI 對話系統多採用半雙工模式,也就是用戶說完一句話後,系統才開始處理並回應,來回之間存在明顯的停頓與輪換感。全雙工則讓模型能夠在同一時間接收並處理聽覺與視覺資訊,同時即時生成回應,使對話流暢無延遲,彷彿與真人面對面交談。

這項技術被視為字節跳動在多模態 AI 領域的重要里程碑,代表公司正從傳統的單輪或輪詢式交互,逐步過渡到「全模態自然交互階段」。多模態指的是模型能同時處理語音、文字、圖像、視訊等多種資訊形式,而 SeedRealtime 更進一步將音訊與視訊的即時雙向流動整合,讓 AI 不僅能聽懂用戶說話,還能透過鏡頭看到用戶的環境、表情或動作,並據此做出更貼近情境的回應。目前豆包 App 用戶可直接體驗這項功能,透過語音與視訊混合的方式與 AI 進行對話。

舉例來說,用戶可以一邊說話一邊展示手中的物品,AI 能即時辨識並回應相關問題;或者用戶在視訊通話風格的介面中,與 AI 進行自然的問答與討論,整個過程不需要按鍵觸發,也不需要等待迴圈。這種體驗大幅降低了人機互動的門檻,讓 AI 更像一個隨時在線的對話夥伴。從產品策略來看,SeedRealtime 的快速上線反映出字節跳動在 AI 應用落地上的明確方針:將先進模型迅速整合進既有產品,以搶佔消費級 AI 交互市場的下一波成長動能。

豆包 App 作為字節跳動旗下主打的 AI 對話產品,已經累積了大量用戶,此次全量更新無疑能讓用戶第一時間體驗到最新的技術成果,同時也為公司收集真實使用場景中的反饋,加速模型迭代。業界分析指出,全雙工音視頻交互是 AI 語音助手從「工具型」走向「陪伴型」的關鍵一步。過去用戶與 AI 對話時,往往需要刻意調整說話節奏,或者等待系統處理完畢才能繼續,這種非自然的互動模式限制了 AI 在日常生活場景中的滲透。SeedRealtime 的推出,讓對話變得更加隨意、即時,用戶可以像與朋友聊天一樣中斷、插話或同時進行多種表達,AI 也能即時理解並回應,大幅提升互動的自然度與效率。

此外,視訊通道的加入為 AI 帶來了更多感知能力。不同於純語音模式只能依賴聲音資訊,SeedRealtime 能夠同時處理視覺線索,例如用戶的表情、手勢、環境中的物體等。這使得 AI 在回答問題時能結合視覺上下文,例如用戶拿著一本書問「這本書值得讀嗎?」AI 可以透過鏡頭辨識書名,並給出相關評價,而不需要用戶先念出書名。這種多模態融合正是未來 AI 交互的重要方向。字節跳動在 AI 大模型領域的布局一直相當積極。從早期的語言模型到圖像生成,再到如今的音視頻全雙工模型,公司持續拓展模型的能力邊界。

SeedRealtime 的推出,不僅是技術層面的突破,更代表字節跳動在消費級 AI 產品上的差異化競爭策略——透過更自然、更沉浸的交互方式,吸引用戶從傳統語音助手轉向新一代 AI 對話平台。對於一般用戶而言,SeedRealtime 的影響最直接體現在豆包 App 的使用感受上。過去使用語音助手時,經常需要考慮「說完一句話後要停頓」或「等待系統回應後才能繼續」,這種互動模式容易讓人感到彆扭。現在,用戶可以像日常對話一樣自由發言,AI 也能即時插入回應或提問,甚至可以在用戶說話時進行打斷和補充,讓對話節奏更貼近真實人際交流。

隨著 SeedRealtime 的全量上線,豆包 App 也將成為市場上少數具備全雙工音視頻交互能力的消費級 AI 產品。這不僅提升了用戶體驗,也為字節跳動在 AI 領域的商業化探索提供了新的支點。未來,這項技術可能進一步整合到其他產品中,例如智慧辦公、線上教育、客服系統等場景,讓全雙工多模態交互成為 AI 服務的標配。從技術發展的角度來看,SeedRealtime 的推出意味著 AI 大模型正在從「理解語言」進化到「理解世界」。全雙工架構讓模型能夠持續接收並處理多模態訊息流,而不是僅在用戶發言時才被動觸發。這種持續感知與即時回應的能力,是 AI 邁向更通用、更智慧形態的重要基礎。

字節跳動選擇在豆包 App 上率先落地,也顯示出公司對消費級市場的高度重視,以及將技術快速轉化為產品競爭力的執行力。總體而言,SeedRealtime 的全量上線標誌著字節跳動在多模態 AI 交互領域已經站上新的台階。對於用戶來說,這是一個更自然、更流暢的對話體驗;對於行業來說,這代表著全雙工音視頻交互技術正式進入大眾視野,並可能帶動新一輪的產品創新與市場競爭。隨著更多用戶開始體驗這項功能,AI 對話的邊界將被進一步拓寬,人機互動的方式也將迎來深刻的改變。

Related

相關文章

六巨頭定AI插件新標準,撞臉Claude,Anthropic沒上桌

六大科技巨頭(AWS、Anysphere、GitHub、微軟、OpenAI、Vercel)聯合發布AI智能體插件統一開放規範Agent Plugins 1.0.0,旨在統一插件打包格式,減少開發者重複勞動。該規範的結構與Anthropic的Claude Code插件系統高度相似,但Anthropic並未參與制定,而是繼續經營自己的封閉生態。

1 小時前
鈦媒體生成式AI

DeepSeek重啟融資,三年市值對齊騰訊?

DeepSeek重啟第二輪融資,以5000億元人民幣估值尋求籌集80億美元,但網傳一份由小型醫藥私募發起的專項基金募資材料引發網友質疑,後經DeepSeek員工證實部分數據屬實。該公司近期宣布API大幅漲價,可能打破其以低價換規模的估值邏輯,面臨客戶流失風險。市場關注其能否從「價格屠夫」轉型為價值提供商,以及三年內市值能否對齊騰訊等巨頭。

2 小時前

可靈AI核心技術骨幹王鑫濤被曝離職

快手可靈AI核心技術骨幹王鑫濤被曝離職,去向未知,快手官方與本人均未回應。王鑫濤是圖像與視頻生成領域知名開源項目主要作者,被視為可靈從0到1的關鍵推手。其離職發生在可靈完成獨立融資、估值180億美元的關鍵階段,可能影響研發進度與競爭優勢。

2 小時前

AI短劇、漫劇、戀綜、電影、藝人都有了,AI觀眾也不遠了

2026年AI影視內容全面爆發,從短劇、長劇到電影、綜藝,AI製作的作品大量湧現,衛視也開始播出AI短劇。AI演員如方桃子迅速走紅,商業變現能力驚人,廣告報價甚至超過許多真人網紅。AI短劇市場規模已突破220億元,用戶超過6億,但同時也引發了對真人演員就業和內容品質的擔憂。

2 小時前