KeyFrame內部研究專用

从字节论文到 Mythos 落地:循环语言模型,AI 架构的下一场革命

胡笳·4月13日週一·5 min中文

三句話摘要

Anthropic 發布史上最強模型 Claude Mythos Preview,社群高度懷疑其底層採用了字節跳動提出的「循環語言模型(LoopLM)」架構。 Claude Mythos Preview 的跨代性能躍升,指向循環語言模型將參數數量與推理深度解耦這一核心突破,這很可能是未來五年 AI 架構演進的主線。 Mythos 的能力遠超前代與競品:在真實世界 bug 修復基準 SWE-bench 上達到 93.9%,長上下文圖遍歷測試 GraphWorks BFS 達到 80%,而同測試前代 Claude 僅 38.7%、GPT-5 僅 21.4%,差距懸殊說明架構層面可能有根本性突破。

重點整理

重點
  • 1

    Mythos 的能力遠超前代與競品:在真實世界 bug 修復基準 SWE-bench 上達到 93.9%,長上下文圖遍歷測試 GraphWorks BFS 達到 80%,而同測試前代 Claude 僅 38.7%、GPT-5 僅 21.4%,差距懸殊說明架構層面可能有根本性突破。

  • 2

    網路安全能力觸及 Anthropic 自設紅線:Mythos 能自動發現高危漏洞並將多個漏洞串接為完整攻擊鏈,強大到 Anthropic 不敢公開,僅向極少數安全合作夥伴開放防禦性測試,這在歷代模型中尚屬首次。

  • 3

    循環語言模型將參數量與思考深度解耦:傳統模型是線性單次前向傳播,LoopLM 則讓輸入反覆通過同一批循環塊,由「出口門」決定是否已思考充分,並在潛向量空間(latent space)中持續迭代推理,效果類似人類在腦中反覆打草稿。

  • 4

    時間線與論文高度吻合是核心推斷依據:字節跳動 2025 年 10 月發表 LoopLM 論文,Mythos 隔年 4 月問世,社群一致認為 Anthropic 至少深度借鑒了此架構,但 Anthropic 並未公開確認。

實用技巧與重點

乾貨
  • 模型名稱:Claude Mythos Preview
  • 發布日期:2026 年 4 月 7 日
  • SWE-bench 代理模式:Mythos 93.9% vs 前代 Claude 未提 vs GPT-5 未提
  • GraphWorks BFS(長上下文圖遍歷):Mythos 80% vs 前代 Claude 38.7% vs GPT-5 21.4%
  • 論文名稱Scaling Latent Reasoning via Looped Language Models
  • 論文發表方:字節跳動(ByteDance)
  • 論文發表時間:2025 年 10 月
  • 架構名稱:LoopLM(循環語言模型)
  • 三項關鍵技術:共享循環塊(Shared Looped Blocks)、出口門(Exit Gate)、潛空間推理(Latent Space Reasoning)
  • 網路安全能力:自動發現高危漏洞、串接多個漏洞形成完整攻擊鏈
  • 開放範圍:僅限極少數安全合作夥伴,用途限防禦性測試

結論

結論

Claude Mythos Preview 的跨代性能躍升,指向循環語言模型將參數數量與推理深度解耦這一核心突破,這很可能是未來五年 AI 架構演進的主線。

完整解析

詳細

Anthropic 在 2026 年 4 月 7 日悄然發布了 Claude Mythos Preview,但與以往高調的模型發布不同,這次幾乎沒有大規模行銷宣傳。真正引發社群震動的,是它在各項基準測試上令人咋舌的表現——尤其是在真實世界程式設計任務基準 SWE-bench 的代理模式中達到 93.9% 的準確率,以及在長上下文圖遍歷測試 GraphWorks BFS 中拿到 80% 的高分,而前一代 Claude 在同一測試中只有 38.7%,GPT-5 更只有 21.4%。這樣的跨代躍升幅度,遠超正常的迭代改進,暗示底層架構存在根本性變化。

在網路安全領域,Mythos 的能力強大到 Anthropic 自己都不敢公開。模型能夠自動發現高危漏洞,並將多個看似獨立的漏洞串接成一條完整的攻擊鏈——這意味著它具備系統性的漏洞挖掘與利用推理能力。正因如此,Anthropic 僅將其開放給極少數安全研究合作夥伴,用途嚴格限制在防禦性測試,這在 Claude 系列的歷史上前所未見。

社群之所以高度懷疑 Mythos 採用了「循環語言模型(LoopLM)」架構,核心依據是時間線的高度吻合:字節跳動於 2025 年 10 月發表了論文《Scaling Latent Reasoning via Looped Language Models》,而 Mythos 在半年後正式亮相。論文提出的 LoopLM 架構與 Mythos 的表現特徵高度一致,社群幾乎形成共識,認為 Anthropic 至少深度借鑒了這一架構思路。

LoopLM 的核心思想是將傳統模型的線性單次前向傳播改為「反覆循環」機制。普通模型的結構如同高速公路,輸入從頭跑到尾直接輸出;而循環語言模型則讓輸入反覆通過同一批「共享循環塊」,每次迭代後由一個「出口門」判斷推理是否充分,若不夠就繼續循環,直到達標才輸出。這個過程發生在「潛向量空間」(latent space)中,類似人類在腦海中反覆修改草稿。這種設計的關鍵優勢在於:模型不需要堆疊大量不同參數,就能實現更深的推理深度,從而在更小的模型體積下達到更強的效果——這也讓「手機端跑超強 AI」的可能性向前邁了一步。

關鍵時刻

Pipeline v2

帶時間戳的重點,會在逐字稿層級分析上線後產生。目前請先透過原始影片觀看。

事實查核

Pipeline v2

說法查證是下一次管線升級的一部分。KeyFrame 只會顯示它真正能驗證的內容。

更多「AI 技術」的內容

Between Two Nerds: Attribution is dead, long live attribution
32 min
AI 技術英文PODCAST8月25日

Between Two Nerds: Attribution is dead, long live attribution

Risky Business

  • 工具成本的破壞性下降 — 傳統上,攻擊者必須重複使用昂貴自製的惡意軟體或工具組,因為開發和維護成本極高。這種成本結構使得安全研究人員可以通過工具特徵和程式碼簽名來追蹤攻擊者。LLM 自動化了代碼生成與維護工作流,使得攻擊者可以輕易為每個目標生成新工具,或改用通用系統工具,導致傳統的工具特徵分析失效。
  • 所有取證證據都在攻擊者掌控之中 — 無論是使用的 IP 位址、惡意軟體類型或戰術流程,這些都是攻擊者的主動選擇。即使看似是隨機巧合,攻擊者仍有能力在事前決定留下什麼痕跡。因此,所有可恢復的取證證據本質上都是攻擊者願意暴露的信息。
  • LLM 削弱工具簽名但保留高階行為特徵 — LLM 經過公開駭客技術訓練,使不同使用者產生相似的攻擊模式。然而,勒索軟體集團、國家級行為者的受害者選擇、贖金要求方式或目標模式等高階特徵仍具有識別價值。例如,鎖定加密交易所的攻擊幾乎只能指向朝鮮。
Everything Goldman Sachs Taught Me About AI (In 10 minutes)
AI 技術英文8月24日

Everything Goldman Sachs Taught Me About AI (In 10 minutes)

Nate Herk

  • 驗證優於相信:看起來完整的AI輸出不等於正確答案,需在提示中要求模型重新檢查數字、引用來源,並對無把握的部分標記。
  • 區分AI與自動化:確定步驟且答案已知的任務用傳統自動化更便宜快速;只在需要判斷力、靈活性或處理複雜資訊時才用AI,兩者結合效果最佳。
  • 以問題驅動選型:先寫清楚「要解決的問題是什麼、成功的樣子是什麼」,再決定用什麼工具,許多失敗項目是從技術而非問題出發。
Mu: a self-hosted personal agent where the interface is an email address you can write to
AI 技術英文8月23日

Mu: a self-hosted personal agent where the interface is an email address you can write to

GitHub Awesome

  • Mu 是自主代理人系統,具有實際網址與獨立伺服器,用戶可透過多種方式與其互動——網頁應用、電子郵件或程式化介面。
  • 架構完整覆蓋日常工作流程的多個層面,整合郵件收發(SMTP/IMAP)、檔案管理、行事曆、新聞聚合、市場數據與搜尋功能於一個 Go 伺服器內。
  • 支援自帶模型與多種通訊協定,用戶可選擇不同的 AI 模型,並透過 MCP、HTTP API 或命令列工具整合到其他系統。