KeyFrame內部研究專用

3 Secret Ways Claude Code’s Creator Actually Uses It

Nate Herk·8月12日週三·11 min英文

三句話摘要

Anthropic 團隊解釋為什麼新版 Claude Code 刪除 80% 系統提示,以及如何透過「解除限制(unhobbling)」讓模型發揮全力。 新模型不需要舊指令,最大的突破是改變「如何指揮」而非「指揮什麼」——用高層級目標和驗證標準取代微管理步驟,讓聰慧的模型發揮真正的潛力。 每個模型都是不同的個性。Anthropic 在每次新模型發佈時都會重新調整系統提示、工具集和工具提示,因為過去對某個模型有效的方法對新模型可能完全行不通。Opus 5 的改進消除了許多過去需要「修正」模型行為的指令。

重點整理

重點
  • 1

    每個模型都是不同的個性。Anthropic 在每次新模型發佈時都會重新調整系統提示、工具集和工具提示,因為過去對某個模型有效的方法對新模型可能完全行不通。Opus 5 的改進消除了許多過去需要「修正」模型行為的指令。

  • 2

    解除限制的概念就像教導不同程度的人。給十歲小孩需要非常具體的逐步指導,但對十年工作經驗的人給同樣指令會適得其反——反而會妨礙他們發揮專業知識。現代 AI 模型更像後者,需要高層級的方向而非微管理。

  • 3

    驗證是關鍵。現代提示的技巧不在於工程化詞彙,而在於設定看似稍難的任務、明確的成功標準,然後讓模型自己驗證成果。重點不再是「你怎麼做」,而是「什麼是完成」。

  • 4

    管理 AI 代理應該像管理人才團隊——給予方向、設定標準、讓它們思考,但保留最後的判斷權。外包思考過程,但保留對願景的理解。

實用技巧與重點

乾貨
  • Anthropic 在 Opus 5 發佈時刪除超過 80% 的系統提示
  • Boris Churny(Claude Code 創作者)建議每隔六個月刪除 CLAUDE.md、所有技能和 hooks,測試模型表現
  • 提示策略轉變:從「做 1、2、3、4 步」改為「描述任務、護欄、退出標準,讓模型自己想辦法」
  • 實例對比:無技能/無 CLAUDE.md 版本的資源指南雖然格式不如有技能的版本整潔,但內容結構(使用時間戳和想法分類)反而更優
  • 概念術語:「Hobbling」(限制模型) 和「Product Overhang」(模型有未被發掘的能力)
  • 在 slash goals 中加入驗證標準範例:「我要的不是原型,而是經過 10 次迭代、完整 QA、明天能上市的產品」

結論

結論

新模型不需要舊指令,最大的突破是改變「如何指揮」而非「指揮什麼」——用高層級目標和驗證標準取代微管理步驟,讓聰慧的模型發揮真正的潛力。

完整解析

詳細

Anthropic 在開發 Claude Code 時有個根本的設計哲學:每個新模型都需要完全不同的對待方式。當 Opus 5 推出時,他們刪除了 80% 的系統提示——這看似違反直覺,卻反映了一個重要的真相:Opus 5 足夠聰慧,許多過去用來「矯正」模型行為的指令反而成了累贅。

講者透過教育比喻解釋這個現象。教十歲小孩製作投影片,需要極具體的指引——每一步、每個顏色、每個格式;但對十年職場經驗的人使用同樣指令,反而會綁手綁腳,妨礙他們發揮專業判斷。現代 AI 模型的進化意味著我們應該逐漸走向「高層級指導」模式。

但這不代表全面刪除所有自訂設定。講者實驗發現,當他移除所有技能和 CLAUDE.md 後,生成的資源指南格式不如以前整潔,卻在邏輯組織上更優(使用時間戳標記每個核心觀點)。結論是:不是刪除一切,而是重新思考。對於品牌指引、視覺偏好、特定工作流這類內容保留技能;但對於創意任務本身的描述應該高層級化,讓模型決定如何執行。

關鍵轉變在於驗證。Boris Churny 強調,現代 AI 工程的核心技能不再是「精妙的提示詞」,而是「如何給模型一個看似略難的任務,並讓它能自我驗證」。設定明確的成功標準、建立驗證機制、讓模型自己檢查工作品質——這比使用者重複檢查更有效。講者甚至在 slash goals 結尾加上「要求完整 QA 和 10 次迭代」這類情緒化的語言,意外地讓模型表現更好。

管理 AI 代理的原則本質上是管理人才的原則。優秀的經理不會微管理,而是設定方向、評定品質、讓團隊發揮。應該外包思考過程給代理,讓它們提出想法,但保留最終的願景理解和判斷權。關鍵是信任能力,同時維持適當的監督。

關鍵時刻

Pipeline v2

帶時間戳的重點,會在逐字稿層級分析上線後產生。目前請先透過原始影片觀看。

事實查核

Pipeline v2

說法查證是下一次管線升級的一部分。KeyFrame 只會顯示它真正能驗證的內容。

更多「AI 技術」的內容

🔬“We have foundation models for language, not for physics” — Anima Anandkumar, Bren Professor of Computing
編輯精選
83 min
AI 技術英文PODCAST8月26日

🔬“We have foundation models for language, not for physics” — Anima Anandkumar, Bren Professor of Computing

Latent Space

  • 加速傳統物理模擬的典範轉移:氣象科學家原本認為 AI 無法匹敵數十年的物理建模工作,但傅里葉神經算子不僅達到同等精度,還快了一萬多倍。原本需要超級計算機的計算現在用消費級 GPU 就能完成,這改變了整個領域的思維方式。
  • 傅里葉域的非局部現象捕捉:傅里葉域能有效表示非局部現象(如大氣河流跨越千里的影響),且計算複雜度為準線性,遠優於完全連接的全局模型。這特別適合流體動力學、量子化學等自然現象中普遍存在的非局部相互作用。
  • 多解析度連續函數表示:神經算子將輸入輸出視為連續函數而非固定維度向量,可在推論時以任意解析度查詢,並能在更高解析度上疊加物理約束或額外數據,克服了固定解析度神經網路的限制。
Between Two Nerds: Attribution is dead, long live attribution
32 min
AI 技術英文PODCAST8月25日

Between Two Nerds: Attribution is dead, long live attribution

Risky Business

  • 工具成本的破壞性下降 — 傳統上,攻擊者必須重複使用昂貴自製的惡意軟體或工具組,因為開發和維護成本極高。這種成本結構使得安全研究人員可以通過工具特徵和程式碼簽名來追蹤攻擊者。LLM 自動化了代碼生成與維護工作流,使得攻擊者可以輕易為每個目標生成新工具,或改用通用系統工具,導致傳統的工具特徵分析失效。
  • 所有取證證據都在攻擊者掌控之中 — 無論是使用的 IP 位址、惡意軟體類型或戰術流程,這些都是攻擊者的主動選擇。即使看似是隨機巧合,攻擊者仍有能力在事前決定留下什麼痕跡。因此,所有可恢復的取證證據本質上都是攻擊者願意暴露的信息。
  • LLM 削弱工具簽名但保留高階行為特徵 — LLM 經過公開駭客技術訓練,使不同使用者產生相似的攻擊模式。然而,勒索軟體集團、國家級行為者的受害者選擇、贖金要求方式或目標模式等高階特徵仍具有識別價值。例如,鎖定加密交易所的攻擊幾乎只能指向朝鮮。
Why the Next AI Breakthrough May Come from Physics with Max Welling - #774
55 min
AI 技術英文PODCAST8月25日

Why the Next AI Breakthrough May Come from Physics with Max Welling - #774

TWIML AI

  • 多層篩選的材料設計流程:先搜尋文獻資料庫找現有材料,若無合適的就用生成模型產生數十萬個候選分子,用機器學習力場進行分子動力學模擬篩選,再進行實驗驗證。這套流程相比傳統量子力學計算能加速效率數個數量級。
  • 生成AI與熱力學的數學等價性:資訊論是兩個領域的共同基礎,生成模型的擴散過程與非平衡統計力學描述資訊損失的過程在數學上完全對應,許多開發出來的方法工具在兩領域都有精確對應的形式。
  • 基礎模型的遷移學習策略:先在廣泛材料資料集上訓練基礎力場表示,再針對特定材料類別進行蒸餾微調,既能保持計算效率也能獲得專一性。