全天候科技生成式AI

字節推出SeedRealtime音視頻全雙工大模型,已在豆包App全量上線

2026年8月5日 17:38
字節推出SeedRealtime音視頻全雙工大模型,已在豆包App全量上線

重點摘要

字節跳動近日正式推出名為 SeedRealtime 的音視頻全雙工大模型,該模型已於旗下 AI 對話產品豆包 App 中完成全量上線。這項新技術讓用戶在與 AI 互動時,能夠同時進行語音與視訊訊號的即時收發,不再需要等待一方說完再回應,實現更接近人類自然對話的雙向交流體驗。

站內 AI 整理稿

字節跳動近日正式推出名為 SeedRealtime 的音視頻全雙工大模型,這項技術已經在旗下 AI 對話產品豆包 App 中完成全量上線。用戶現在打開豆包 App,就能體驗到語音與視訊訊號同時收發的即時互動,不再需要等待一方說完才能回應,對話過程更接近人類自然交流的雙向節奏。 SeedRealtime 的關鍵突破在於「全雙工」架構。傳統的語音助手或 AI 對話系統多採用半雙工模式,也就是用戶說完一句話後,系統才開始處理並回應,來回之間存在明顯的停頓與輪換感。全雙工則讓模型能夠在同一時間接收並處理聽覺與視覺資訊,同時即時生成回應,使對話流暢無延遲,彷彿與真人面對面交談。 這項技術被視為字節跳動在多模態 AI 領域的重要里程碑,代表公司正從傳統的單輪或輪詢式交互,逐步過渡到「全模態自然交互階段」。多模態指的是模型能同時處理語音、文字、圖像、視訊等多種資訊形式,而 SeedRealtime 更進一步將音訊與視訊的即時雙向流動整合,讓 AI 不僅能聽懂用戶說話,還能透過鏡頭看到用戶的環境、表情或動作,並據此做出更貼近情境的回應。 目前豆包 App 用戶可直接體驗這項功能,透過語音與視訊混合的方式與 AI 進行對話。舉例來說,用戶可以一邊說話一邊展示手中的物品,AI 能即時辨識並回應相關問題;或者用戶在視訊通話風格的介面中,與 AI 進行自然的問答與討論,整個過程不需要按鍵觸發,也不需要等待迴圈。這種體驗大幅降低了人機互動的門檻,讓 AI 更像一個隨時在線的對話夥伴。 從產品策略來看,SeedRealtime 的快速上線反映出字節跳動在 AI 應用落地上的明確方針:將先進模型迅速整合進既有產品,以搶佔消費級 AI 交互市場的下一波成長動能。豆包 App 作為字節跳動旗下主打的 AI 對話產品,已經累積了大量用戶,此次全量更新無疑能讓用戶第一時間體驗到最新的技術成果,同時也為公司收集真實使用場景中的反饋,加速模型迭代。 業界分析指出,全雙工音視頻交互是 AI 語音助手從「工具型」走向「陪伴型」的關鍵一步。過去用戶與 AI 對話時,往往需要刻意調整說話節奏,或者等待系統處理完畢才能繼續,這種非自然的互動模式限制了 AI 在日常生活場景中的滲透。SeedRealtime 的推出,讓對話變得更加隨意、即時,用戶可以像與朋友聊天一樣中斷、插話或同時進行多種表達,AI 也能即時理解並回應,大幅提升互動的自然度與效率。 此外,視訊通道的加入為 AI 帶來了更多感知能力。不同於純語音模式只能依賴聲音資訊,SeedRealtime 能夠同時處理視覺線索,例如用戶的表情、手勢、環境中的物體等。這使得 AI 在回答問題時能結合視覺上下文,例如用戶拿著一本書問「這本書值得讀嗎?」AI 可以透過鏡頭辨識書名,並給出相關評價,而不需要用戶先念出書名。這種多模態融合正是未來 AI 交互的重要方向。 字節跳動在 AI 大模型領域的布局一直相當積極。從早期的語言模型到圖像生成,再到如今的音視頻全雙工模型,公司持續拓展模型的能力邊界。SeedRealtime 的推出,不僅是技術層面的突破,更代表字節跳動在消費級 AI 產品上的差異化競爭策略——透過更自然、更沉浸的交互方式,吸引用戶從傳統語音助手轉向新一代 AI 對話平台。 對於一般用戶而言,SeedRealtime 的影響最直接體現在豆包 App 的使用感受上。過去使用語音助手時,經常需要考慮「說完一句話後要停頓」或「等待系統回應後才能繼續」,這種互動模式容易讓人感到彆扭。現在,用戶可以像日常對話一樣自由發言,AI 也能即時插入回應或提問,甚至可以在用戶說話時進行打斷和補充,讓對話節奏更貼近真實人際交流。 隨著 SeedRealtime 的全量上線,豆包 App 也將成為市場上少數具備全雙工音視頻交互能力的消費級 AI 產品。這不僅提升了用戶體驗,也為字節跳動在 AI 領域的商業化探索提供了新的支點。未來,這項技術可能進一步整合到其他產品中,例如智慧辦公、線上教育、客服系統等場景,讓全雙工多模態交互成為 AI 服務的標配。 從技術發展的角度來看,SeedRealtime 的推出意味著 AI 大模型正在從「理解語言」進化到「理解世界」。全雙工架構讓模型能夠持續接收並處理多模態訊息流,而不是僅在用戶發言時才被動觸發。這種持續感知與即時回應的能力,是 AI 邁向更通用、更智慧形態的重要基礎。字節跳動選擇在豆包 App 上率先落地,也顯示出公司對消費級市場的高度重視,以及將技術快速轉化為產品競爭力的執行力。 總體而言,SeedRealtime 的全量上線標誌著字節跳動在多模態 AI 交互領域已經站上新的台階。對於用戶來說,這是一個更自然、更流暢的對話體驗;對於行業來說,這代表著全雙工音視頻交互技術正式進入大眾視野,並可能帶動新一輪的產品創新與市場競爭。隨著更多用戶開始體驗這項功能,AI 對話的邊界將被進一步拓寬,人機互動的方式也將迎來深刻的改變。

Related

相關文章

首個面向LLM的蛋白突變排序標準化評測基準,哈佛大學團隊提出PG-LLM,一次性測評13款主流模型+95種專業模型

賬號設置我的關注我的收藏申請的項目退出登錄登錄搜索36氪Auto數字時氪未來消費智能湧現未來城市啟動Power on36氪出海36氪研究院潮生TIDE36氪企服點評36氪財經職場bonus36碳後浪研究所暗湧Waves硬氪氪睿研究院媒體品牌企業號企服點評36Kr研究院36Kr創新諮詢企業服務核心服務城市之窗政府服務創投發佈LP源計劃VClubVClub投資機。

剛剛

每週2億年輕人用ChatGPT,卻連高手的零頭都沒用出來

賬號設置我的關注我的收藏申請的項目退出登錄登錄搜索36氪Auto數字時氪未來消費智能湧現未來城市啟動Power on36氪出海36氪研究院潮生TIDE36氪企服點評36氪財經職場bonus36碳後浪研究所暗湧Waves硬氪氪睿研究院媒體品牌企業號企服點評36Kr研究院36Kr創新諮詢企業服務核心服務城市之窗政府服務創投發佈LP源計劃VClubVClub投資機。

剛剛

AI到底是什麼

賬號設置我的關注我的收藏申請的項目退出登錄登錄搜索36氪Auto數字時氪未來消費智能湧現未來城市啟動Power on36氪出海36氪研究院潮生TIDE36氪企服點評36氪財經職場bonus36碳後浪研究所暗湧Waves硬氪氪睿研究院媒體品牌企業號企服點評36Kr研究院36Kr創新諮詢企業服務核心服務城市之窗政府服務創投發佈LP源計劃VClubVClub投資機構庫投資機構職位推介投資人認證投資人服務項目推薦36氪Pro創投氪堂企業入駐創業。

剛剛

前線共創,雙向賦能:FDE 模式行業觀察與實踐報告

賬號設置我的關注我的收藏申請的項目退出登錄登錄搜索36氪Auto數字時氪未來消費智能湧現未來城市啟動Power on36氪出海36氪研究院潮生TIDE36氪企服點評36氪財經職場bonus36碳後浪研究所暗湧Waves硬氪氪睿研究院媒體品牌企業號企服點評36Kr研究院36Kr創新諮詢企業服務核心服務城市之窗政府服務創投發佈LP源計劃VClubVClub投資機。

剛剛

千萬別隨便跟 AI 掏心窩子,斯坦福研究揭露了一個扎心真相

賬號設置我的關注我的收藏申請的項目退出登錄登錄搜索36氪Auto數字時氪未來消費智能湧現未來城市啟動Power on36氪出海36氪研究院潮生TIDE36氪企服點評36氪財經職場bonus36碳後浪研究所暗湧Waves硬氪氪睿研究院媒體品牌企業號企服點評36Kr研究院36Kr創新諮詢企業服務核心服務城市之窗政府服務創投發佈LP源計劃VClubVClub投資機。

剛剛

“連賣AI的微軟也扛不住了”……一人每月燒掉數千美元Token,工程師被提醒別「狂刷Token」,並開始對AI消耗“限額”

賬號設置我的關注我的收藏申請的項目退出登錄登錄搜索36氪Auto數字時氪未來消費智能湧現未來城市啟動Power on36氪出海36氪研究院潮生TIDE36氪企服點評36氪財經職場bonus36碳後浪研究所暗湧Waves硬氪氪睿研究院媒體品牌企業號企服點評36Kr研究院36Kr創新諮詢企業服務核心服務城市之窗政府服務創投發佈LP源計劃VClubVClub投資機。

剛剛