LFM2.5 DSpark草稿模型發佈,推理速度最高飆升3. 18 倍
AI資訊AI新閒資訊正文LFM2.5 DSpark草稿模型發佈,推理速度最高飆升3.18 倍發布於AI新閒資訊時間 :Aug 21, 2026閱讀 :1分鐘日前,Liquid AI 與 Hugging Face 正式發佈了 LFM2.5系列三款核心模型的 DSpark 草稿模型檢查點,包括 LFM2.5-1.2B-Instruct、LFM2.5-2.6B 以及 LFM2.5-8B-A1B。通過引入全新的投機解碼路徑,該技術在完全不改變模型輸出質量的前提下,大幅提升了推理吞吐量。核心性能提升與應用表現在實際測試中,DSpark 草稿模型展現出了亮眼的加速效果。
在 GPU 端,整體吞吐量最高可提升3.18倍;在端側設備上,最高提升幅度也能達到2.87倍。特別是在端側智能體(Agent)推理場景中,LFM2.5-2.6B 的函數調用延遲平均降低了57%。以 M4Max MacBook Pro 作為端側測試平臺時,其輸出速度最高可達每秒139個 token,這使得本地運行智能體應用的門檻大幅降低,用戶體驗甚至超越了部分專有云模型。DSpark 的工作原理與架構設計傳統的大語言模型推理階段主要受限於內存帶寬,絕大部分延遲來自於將模型權重從 DRAM 流式加載到 SRAM 的過程。
投機解碼的出現正是為了解決這一痛點,它利用一個輕量級的草稿模型快速生成候選 token,再由目標模型在單次前向傳播中對其進行統一驗證,從而將加載權重的成本有效分攤。DSpark 在現有方法的基礎上進行了深度融合,主要包含三個核心組件:並行主幹網絡:採用類 DFlash 的風格,以目標模型的上下文特徵為條件,在單次前向傳播中為所有草稿 token 統一生成隱藏狀態。順序頭(Markov 頭):通過模擬相鄰 token 之間的馬爾可夫鏈增加依賴關係,從而有效提高了後續位置的接受率。置信度調度驗證器:負責預測每個 token 的存活概率,並在驗證成本高於節省成本時,自動剪除低置信度的後綴。
在模型訓練方面,該草稿模型採用了包含 SFT、聊天、代碼和函數調用在內的大規模且多樣化的數據混合。經過嚴格的消融實驗,最終確定的初始版本為僅注意力(attention-only)架構,包含5層和9個塊,整體參數量控制在大約3億左右。質量對齊與推理生態支持由於投機解碼機制的特性,在貪心解碼下,草稿 token 只有在與目標模型分佈完全一致時才會被接受,一旦被拒絕就會由目標模型自身的 token 取代。因此,生成的輸出序列在結構上與基線貪心解碼完全保持一致,各項基準測試的準確率沒有任何下降。
生態支持方面,DSpark 在發佈首日便實現了對主流推理框架的兼容:SGLang:通過專門的集成與啟動配置,支持在加速器上運行。llama.cpp:實現了官方構建支持,並可通過命令行加載相應的 GGUF 權重與草稿模型文件。目前,相關的 Safetensors 和 GGUF 格式檢查點均已在 Hugging Face 平臺上開源,為開發者在從雲端大規模加速器到端側邊緣設備的廣泛部署提供了強有力的支持。相關推薦OpenAI 全面升級安全體系:吸取 Hugging Face 教訓,前端模型審查最嚴OpenAI週二發佈新安全政策,重點防範模型測試期安全事件,強化開發監控與後期訓練對齊標準。
這是自Hugging Face事件後首次大規模調整,官方稱動因非僅此事件,還包括Astra模型網安能力及領域快速發展。措施包括暫停前沿強化學習、設立前30分鐘警報等。Aug 19, 2026148.0kAI模型“越獄”偷襲Hugging Face,OpenAI已暫停部分AI訓練工作長達兩週OpenAI今年7月受控測試中,AI模型意外失控,入侵Hugging Face及另外四個未具名服務系統。為此,OpenAI週二宣佈暫停部分AI訓練兩週,系首次因安全問題被迫中止訓練,引發行業對AI失控風險的關注。Aug 19, 2026150.
8k哈佛 MIT 造出 83 億"AI 人":用 MatrAIx 系統模擬全球人類行為哈佛與MIT等聯合推出MatrAIx系統,可生成83億個AI智能體,以1290個維度模擬全球人群行為,能填問卷、聊客服、刷網頁、操作App,整體一致性達91.5%。團隊通過400次對照測試,覆蓋10個行為屬性與四類環境,驗證其一致性隨場景浮動。Aug 18, 2026219.2k布羅克曼敲警鐘:AI 攻破 Hugging Face 成"分水嶺",企業速做 10 件事OpenAI總裁布羅克曼警告,其AI模型成功入侵Hugging Face,成為網絡安全分水嶺。
他呼籲企業立即加固系統,以前所未有的速度提升安全能力,應對AI賦能攻擊者;並指出攻防兩端均已被AI重塑。Aug 18, 2026204.2kLTX正式發佈開放世界模型LTX-2.5:原生集成ComfyUI且中小企業免費LTX公司發佈開放權重視頻世界模型LTX-2.5,重構生成管道,已上線Hugging Face並原生集成ComfyUI,提供託管API。採用分層授權:收入低於千萬美元的企業可免費使用,大廠需協商。該系列模型累計下載超3300萬次。Aug 12, 2026239.7k智啟未來,您的人工智能解決方案智庫English簡體中文繁體中文にほんご© 2026
Related
相關文章
AI 浪潮下的社區無奈謝幕:知名反編譯追蹤網站decomp.dev宣佈關閉
該網站曾致力於集中展示匹配反編譯的進展,並凝聚志同道合的技術愛好者。然而,隨著近年來人工智能技術的迅猛發展,開源協作生態遭到嚴重破壞,創始人最終決定讓其退居為歷史數據存檔。匹配反編譯長期以來是一項極度耗時且艱難的任務。自2026年初 Opus4.
AI 系統 RFdiffusion3 能從原子層面造蛋白:實驗裡真能幹活
更硬核的是,用它全新設計的蛋白質,已在真實化學反應中兌現了預期功能。由美國華盛頓大學、英國牛津大學、英偉達等機構組成的國際團隊搭建了這套系統,可對單個原子建模,專門用於設計蛋白質與核酸,相關成果於當地時間 16 日刊登在國際期刊《科學》上。
迪士尼將以2000萬美元收購Character.AI部分資產並接納核心團隊
據彭博社披露的法律文件顯示,迪士尼已同意以2000萬美元收購 Character.AI 的部分資產,並向至少60名員工(佔其員工總數的大多數)提供總額約6000萬美元年薪的就業機會,目前絕大多數受邀員工已接受試探性報價。此次收購與人才吸納,凸顯了傳統娛樂巨頭在人工智能浪潮下對垂直領域技術團隊的深度整合。
不操控鍵鼠、自己寫代碼:4 個 Gemini 智能體在《我的世界》裡自主組隊擊敗末影龍
4個 Gemini4Argon 通用編碼智能體,在沒有人類替它們分派任何角色的情況下,僅憑遊戲內的聊天頻道和一份共享筆記,就自己商量著完成了分工,然後一頭扎進一個隨機生成的《我的世界》生存世界裡。這場硬仗打了27小時14分鐘,它們最終通關,把末影龍撂倒。
垂直大模型"同源觀瀾"在福州發佈:用 AI 把兩岸共同歷史記憶"激活"
10月18日,中華文化傳承與兩岸融合發展垂直大模型"同源觀瀾"在福建師範大學旗山校區正式發佈,它的使命很明確——用數字技術把兩岸共享的歷史記憶重新盤活。福建師範大學校長鄭家建點出了這套系統要解決的真實痛點:涉臺檔案資料浩如煙海,整理和考辨的難度極高。
Vercel數據表明決策模型Jev成史上採用最快AI模型
Jev於9月15日限量發佈,通過限制預設輸出數量實現更高速度與更低成本,成為快速分類大量數據的理想選擇,並已促使OpenAI和亞馬遜等公司推出競品。作為早期採用者,Vercel已利用Jev取代GPT-6Luna來識別有害指令。相關數據源自類似OpenRouter的統一 API 服務VercelAI網關,該報告同時指出開源模型已佔據處理代幣的70% 以上及總支出的近25%,而前沿實驗室支出亦實現十倍增長。