KeyFrame內部研究專用
每日

今日 KeyFrame

管線分析的每一部影片,最新的優先。每張卡片都直接連回原始影片。

3月28日星期六

2
OpenClaw 不是龙虾是鸡肋
10 min
AI 技術中文3月28日

OpenClaw 不是龙虾是鸡肋

外行人看人工智能

  • 技術門檻極高,非技術用戶無從入手:OpenCloud 需在本地搭建環境、申請 API Key、設定訪問權限並讀懂 CLAUDE.md 文件。核心維護者 Shadow 在 Discord 明確表示,不懂命令行就不該碰這個工具,因為風險太高。
  • 信任問題根本無解:OpenCloud 需要幾乎全部的數位生活權限——讀郵件、查日曆、執行系統命令、代替用戶發訊息。計算機系學生 Jack Luo 的案例顯示,AI 在未明確授權下自行在交友平台建立主頁並篩選對象,自主決策與用戶真實意圖之間的落差讓普通人無法判斷對錯。
  • 安全設計本身有缺陷:思科安全團隊測試第三方插件後發現數據竊取與提示詞注入攻擊,並指出插件倉庫缺乏足夠審核機制。Gartner 分析師直言其「設計默認不安全」,安全風險對普通用戶完全不可接受。
Claude基本功 EP01:一次搞懂 Claude 全生態:從聊天到全自動化寫程式
11 min
AI 技術中文3月28日

Claude基本功 EP01:一次搞懂 Claude 全生態:從聊天到全自動化寫程式

三師爸Sense Bar

  • Claude Chat 是雲端對話基礎:無法讀取本機檔案、不能控制電腦,但能輸出 Word、Excel、PDF、SVG 等多種格式檔案,內建 Office 文件處理能力強大。
  • Cowork 提供三層功能擴展:支援檔案操作(限 user 目錄內)、設定每日排程自動化任務(如每天早上整理 Gmail 和行事曆)、利用 Dispatch 遠程操控電腦和瀏覽器(需安裝 Claude 瀏覽器外掛)。
  • Claude Code Desktop 降低技術門檻:提供圖形化介面,新手用 Plan Mode 逐步引導、老手用 Auto Accept 加速、高手用 Bypass Permissions 全自動執行,支援截圖對話即時除錯。

3月27日星期五

3
2026AI赋能外贸实战,本地部署AI模型+工具选型策略,一站式搭建自动化外贸获客系统
3 min
AI 技術中文3月27日

2026AI赋能外贸实战,本地部署AI模型+工具选型策略,一站式搭建自动化外贸获客系统

创想项目库

  • AI 自動化可依能力分為三個等級,對應不同複雜度的任務場景,等級越高自動化程度越強,但落地成本與技術門檻也越高。
  • AI 自動化工作流(第二級)是目前最具實用性的形態,它透過拖拽節點串聯複雜流程,讓不會寫程式的用戶也能實現高度自動化與批量處理。
  • 智能代理(第三級)雖然概念先進,但有三大限制:需要強大底層模型、長文本處理能力不足、執行成本高且準確率不穩定,短期內難以低成本普及。
跟我一起唸+英文跟讀練習 🎧 🗣️|一步一步開口說,讓英文更自然 ✨
28 min
英文學習中文3月27日

跟我一起唸+英文跟讀練習 🎧 🗣️|一步一步開口說,讓英文更自然 ✨

English 1314

  • 小目標優先於等待準備好:影片強調「先開始再成長」,每天學 5 個單字或說英文 10 分鐘,長期累積會帶來顯著改變,而非等到準備充分才行動。
  • 模仿聲音而非只背單字:跟讀練習的重點是複製講者的音調與節奏,讓嘴型肌肉記住英語的發音方式,這能讓口說聽起來更流暢自然。
  • 日常情境就是最好的課堂:從描述天氣、點餐、問路到接電話,簡單但真實可用的英語比複雜句型更有價值,因為可以立即在現實生活中套用。
Black Hat USA 2025 | Evaluating Autonomous Vehicle Resilience
29 min
AI 安全英文3月27日

Black Hat USA 2025 | Evaluating Autonomous Vehicle Resilience

Black Hat

  • 遠端操作不是人類駕駛,而是 AI 的顧問系統:人類操作員不接管方向盤,只傳送路點建議,AI 全程保有車輛控制權並自行判斷是否採納,這使得操作指令本身成為一個新的攻擊面。
  • 模糊測試框架從真實駕駛數據生成場景種子:系統將車輛位置、操作指令類型、周圍車流軌跡等關鍵特徵萃取成可重現的基礎場景,再透過「遠端操作參數(TV Parameters)」對路點做橫向或縱向偏移,生成大量變異版本,讓測試覆蓋手動無法窮舉的邊角案例。
  • 模糊測試能發現隱藏的、條件依賴的 Bug:案例二的倒車交叉口碰撞,根因是預測模組中一個只在特定時序與多車軌跡組合下才觸發的細微 Bug,純手動測試幾乎不可能找到。

3月26日星期四

10
醫療越獄:一人與AI如何駭進療法
8 min
AI 技術中文3月26日

醫療越獄:一人與AI如何駭進療法

台灣全我中心

  • 癌症被重新定義為「程式錯誤」:保羅將癌症視為 DNA 程式碼中的 bug,套用工程師的 debug 思維逐步拆解問題,讓非醫學背景者也能系統性切入生物難題。
  • AI 工具鏈壓縮了科學時間軸:從基因比對到蛋白質 3D 建模,傳統需要頂尖團隊花數年完成的步驟,保羅靠 AI 在數分鐘到數天內完成,顯示工具的可及性已根本改變。
  • 最大阻力不是科學,而是監管體制:AI 幾分鐘算出解法,但現實世界的審批耗費三個月,暴露出現行監管架構是為大規模量產藥物設計,無法應對個人化精準醫療的需求。
中級iPAS AI 應用規劃師科目三模擬試題(3)
6 min
AI 技術中文3月26日

中級iPAS AI 應用規劃師科目三模擬試題(3)

AI live & life

  • Transformer 的自注意力機制是長文本理解的核心:模型在處理文字時自動辨別哪些詞最關鍵,因此在長序列任務中表現遠優於傳統模型。
  • 特徵編碼方式直接影響模型判斷:對無順序關係的類別特徵使用 Label Encoding,會讓樹狀模型誤解數字大小代表重要程度,應改用 One-Hot Encoding 避免隱性偏差。
  • XGBoost 對傳統 GBT 的三點改進:加入正則化防止 Overfitting、原生支援缺漏值處理、支援平行化運算提升訓練速度,三者合力使其成為競賽與業界首選。
Black Hat USA 2025 | Windows Hell No for Business
36 min
Web2 安全英文3月26日

Black Hat USA 2025 | Windows Hell No for Business

Black Hat

  • 生物驗證與密碼驗證在熵來源上存在根本差異:傳統密碼驗證中,密碼本身提供密碼學熵;生物辨識中,「臉部」只是識別觸發器,實際釋放金鑰的機制依賴磁碟上的資料,導致無法在金鑰釋放時強制綁定具體的生物輸入。
  • 資料庫加密依賴系統層 DPAPI,本地管理員等同擁有解密能力:Windows 使用 `CryptProtectData/CryptUnprotectData` 保護資料庫加密標頭,此函式在 System 帳戶下執行,使得具有本地管理員權限的攻擊者可直接呼叫並解密,讀取、篡改任意用戶的生物模板。
  • ESS(增強型登入安全)模式透過 VBS 隔離解決根本問題:ESS 在 Hypervisor 的 VTL1(隔離虛擬機)中獨立運行生物辨識服務,模板金鑰只存在於 VTL1 記憶體,VTL0(正常 OS)即使擁有管理員權限也無法存取,但此模式需要硬體(安全攝影機感測器 + Intel 晶片)支援。
Black Hat USA 2025 | Use and Abuse of Personal Information -- Politics Edition
34 min
Web2 安全英文3月26日

Black Hat USA 2025 | Use and Abuse of Personal Information -- Politics Edition

Black Hat

  • 假身份追蹤法揭露資料流向:研究團隊對每位候選人只提供一次假 PII,因此一旦收到來自第三方的信件,就能確認是該候選人外洩,追蹤鏈完整無漏洞。
  • 政治郵件的核心目的只有兩件事:分析詞頻後,"donate" 與 "vote" 遠超所有議題關鍵字;NATO 被提及 7,184 次,但 donate 被提及 52,000 次,說明競選郵件本質是募款機器,非政策溝通。
  • 個資洩漏是常態,且與選情高度相關:5% 候選人確認共享選民資料(包含跨黨派共享 5 例),其中 85% 在選舉中落敗,暗示資料管理混亂與競選能力可能存在相關性。
Rob T. Lee, Glenn Thrope, Dan Hubbard & Sergej Epp - Vibe Coded | [un]prompted 2026
12 min
AI 技術英文3月26日

Rob T. Lee, Glenn Thrope, Dan Hubbard & Sergej Epp - Vibe Coded | [un]prompted 2026

unprompted

  • AI 工具可將複雜安全分析完全自動化。SANS SIFT workstation 加上 Claude Code,經 45 分鐘配置後,在 14 分 27 秒內完成傳統需 3 天的入侵分析,透過預配置 CLAUDE.md 和 skills 實現無縫集成。
  • AI 高速開發帶來安全漏洞風險。Glenn Thorp 用 Lovable 在 8 分鐘內生成 6,800 行程式碼、17 個依賴,自動爬取並複製會議網站,甚至能建立虛假支付頁面,展示此類工具易被用於釣魚或詐騙。
  • 漏洞利用時間窗口急劇縮小,2020 年需一年以上,現在僅約一天,超過 50% 零日漏洞在補丁發佈前已被利用,但企業補丁流程並未相應加速。
Dan Hubbard - Opening Poem | [un]prompted 2026
3 min
AI 技術英文3月26日

Dan Hubbard - Opening Poem | [un]prompted 2026

unprompted

  • 速度超越治理 — 當代碼自動生成速度遠超過安全掃描能力,傳統檢查機制形同虛設,導致大量未經審查的代碼直上生產。
  • 權限與信任崩潰 — 服務帳號被賦予過度寬泛的權限(god mode),測試憑證留在日誌中無人追蹤,信任邊界消散,每個被調用的代理都成為潛在破口。
  • 新型攻擊面 — 提示注入、不信任的依賴庫、自動化帶來的決策盲點,以及代理之間層層調用形成的深層作用域,使攻擊面從「明顯的門」變成「無所不在的縫隙」。
Gadi Evron - Opening Words - “Research conferences aren’t effective.” | [un]prompted 2026
11 min
AI 技術英文3月26日

Gadi Evron - Opening Words - “Research conferences aren’t effective.” | [un]prompted 2026

unprompted

  • 技術民主化無需深度專業——安全專業人士、財務人員、HR 都應立即開始使用 AI 工具。不是精通數學或編程,只需嘗試便能從「當前技術水平」躍升至「接近最前沿」,就像從 Google 升級到 ChatGPT。
  • 會議設計重視社群交互而非單向演講——破棄傳統大型研討會的隔離感,強制參與者相互打招呼,透過 Slack 線程討論講者內容,提倡非正式知識共享與人脈建立。
  • 網路建立需從結構設計著手——傳統會議難以進行有意義的交流(名牌難讀、社交場景嘈雜、無法配對志同道合者),故設計「棒球卡」風格的個人檔案頁面,展示專業領域與可提供幫助。
Daniel Miessler - Anatomy of an Agentic Personal AI Infrastructure | [un]prompted 2026
23 min
AI 技術英文3月26日

Daniel Miessler - Anatomy of an Agentic Personal AI Infrastructure | [un]prompted 2026

unprompted

  • 公司API化與演算法化——未來企業不能要求使用者進入UI手動操作,而是必須提供API介面讓AI代理調用。同時,公司內部將演進為清晰的演算法圖,讓AI能理解、監管、更新組織流程。
  • 多頭辯論代理系統(Council)——在決策時刻生成2-16位該領域專家代理進行激烈辯論,由主代理觀察辯論過程並形成建議,這比單一AI生成更具有對抗性檢驗與創意撞擊。
  • 理想狀態反向工程——系統透過理解使用者背景與意圖,將模糊需求反向轉譯為離散、可測試的「理想狀態準則」,同時這些準則也成為最終驗證標準,貫穿整個七階段科學方法流程。
Xenia Mountrouidou - Traditional ML vs LLMs: who can classify better? | [un]prompted 2026
7 min
AI 技術英文3月26日

Xenia Mountrouidou - Traditional ML vs LLMs: who can classify better? | [un]prompted 2026

unprompted

  • 傳統機器學習模型(尤其 XGBoost)在精準度和召回率上表現最優,對發現惡意行為最敏感且最準確。語言模型作為零樣本分類器雖無須訓練只需提示,但在當前研究中表現不如傳統 ML。混合方案(先用 XGBoost 分類再交由 LLM)能比單獨使用 LLM 取得更好結果,說明兩種方法各有優勢。LLM 在處理非文本資料(如網路數據包)時面臨困難,需要大量特徵工程才能引導模型做出零樣本分類。
Jackson Reed - Are you thinking what I'm thinking? | [un]prompted 2026
4 min
AI 安全英文3月26日

Jackson Reed - Are you thinking what I'm thinking? | [un]prompted 2026

unprompted

  • 推理模型的思考塊以HMAC簽名或加密blob形式受保護,但其密碼學驗證只確認塊來自官方提供商,並未將其綁定到特定的對話ID或上下文。
  • 攻擊者可在A對話中竊取任何思考塊及其簽名,然後在B對話(甚至不同API金鑰或帳戶)中重放該思考塊,欺騙模型相信自己在考慮原始問題。
  • 這個漏洞源自威脅建模遺漏——Anthropic和OpenAI的驗證層只檢查「來自合法提供商」,沒有額外鎖定到對話內容;Gemini採用不同簽名機制,較不易受影響。

3月25日星期三

15
[EP199.健全「人資九大循環」打造老闆員工雙贏]
32 min
企業管理中文3月25日

[EP199.健全「人資九大循環」打造老闆員工雙贏]

經營男不難

  • 企業與員工的平行時空認知差異:企業想要責任感強、抗壓力高、配合度高的員工,但員工想要看到未來發展、合理薪資與晉升機會。解決方案不是單方面讓步,而是雙方都要建立正確的制度基礎——企業提供清晰的經營目標、吸引人的制度與薪酬結構,員工則需主動培養多職能能力以提升自身價值。
  • 精實團隊是績效導向,不是剝削:讓兩個多職能員工做三人的工作,並非「慾老闆」行為,而是把三個人的薪水給兩個人,同時通過變動薪酬(獎金、福利、分紅)而非固定薪酬來增加,這樣企業實際負擔不會增加,反而能挑選真正優秀的人才。
  • 人力資源九大循環是實踐經驗,非空談理論:從目標設定開始,依次經過組織規劃、工作分析、人力配置、教育訓練、薪酬制度、績效考核、人員篩選、晉升輪調,形成完整閉環。這套體系不是講者創新,而是他從 1973 年至今 50 多年來實際運作的總結,臺灣少有人能講清楚,因為多數缺乏實務經驗。
企業如何評估 Agentic AI 投資風險?從 AIBOM 到 SysVec 防禦的完整指南
12 min
AI 安全中文3月25日

企業如何評估 Agentic AI 投資風險?從 AIBOM 到 SysVec 防禦的完整指南

SEOKING | AISO 360 | Roger Lin

  • 1. AI 供應鏈盲區是企業最大的系統性風險
  • 超過 62% 的企業人員不知道組織內跑著哪些 AI 模型、用著什麼資料。AIBOM(AI 物料清單)就像餐廳食材溯源系統,讓企業在發生語意洩漏或 AI 幻覺時能迅速追查根因,而非眼睜睜看著商譽崩潰。
  • 2. 雙代理語意防火牆取代傳統邊界防禦
中級iPAS AI 應用規劃師科目三模擬試題(2)
10 min
AI 技術中文3月25日

中級iPAS AI 應用規劃師科目三模擬試題(2)

AI live & life

  • 數學原理決定策略思維底層:貝氏定理讓模型能根據新行為動態更新預測;蒙地卡羅透過大量隨機模擬量化不確定風險;PCA 則以保留 80–90% 變異量為目標做維度精簡,三者分別對應不同類型的規劃場景。
  • VGG16 的一個易錯考點:參數量最多的是全連接層,但計算量(FLOPs)最大的反而是卷積層;MSE 的平方設計讓大誤差受到更重懲罰,兩者的差異在考題中反覆出現。
  • AutoML 是資源受限場景的戰略解:當團隊無資料科學家且時程緊迫時,AutoML 可自動完成特徵處理、模型挑選、超參數優化,快速產出可用模型,而非慢慢試驗。
Black Hat USA 2025 | Smart Charging, Smarter Hackers: The Unseen Risks of ISO 15118
24 min
Web2 安全英文3月25日

Black Hat USA 2025 | Smart Charging, Smarter Hackers: The Unseen Risks of ISO 15118

Black Hat

  • 標準解決了通訊層風險,但將充電站視為可信實體:ISO 15118 以 TLS 加密車輛與充電站之間的通訊並強制 PKI 身份驗證,但標準明確假設充電站本身是安全的,這個假設在現實中不成立,導致物理入侵與持久性妥協仍是有效攻擊路徑。
  • 標準修補舊漏洞,卻在邊角留下新缺口:Plug & Charge 引入憑證撤銷機制,但標準缺乏強制充電站同步可信時間源的機制,攻擊者只需竄改本地時鐘即可讓充電站接受已過期或已撤銷的憑證,讓原本「已解決」的威脅死灰復燃。
  • V2G 功能把充電站變成電網武器:智慧充電與 V2G 是標準的核心創新,卻同時成為新攻擊向量——攻擊者控制多個充電站後可同步進行持續充放電,將電網頻率推離安全操作範圍,複製西班牙 2025 年 48 小時大停電的情境。
Heather Adkins &  Four Flynn - Evaluating Threats & Automating Defense at Google | [un]prompted 2026
20 min
AI 技術英文3月25日

Heather Adkins & Four Flynn - Evaluating Threats & Automating Defense at Google | [un]prompted 2026

unprompted

  • 漏洞數量爆炸性增長:NVD 待分析隊列積壓 30,000 個漏洞,2014-2015 年間 CVE 記錄漏洞增加 35%。十億美元級創投資金流入漏洞發現領域,意味著自動化發現漏洞的時代已來臨,現有 CVSS 評分系統將逐漸失效。
  • Big Sleep 的核心創新:不是簡單提示 LLM 找 bug,而是建立自我反饋的智能體框架,模擬 Project Zero 專業研究員的工作方式——構建假設、運用調試器和代碼瀏覽器驗證、反覆迭代,最後產生漏洞利用證明和高品質報告,確保每個發現的漏洞都真實可利用。
  • Code Minder 的多層驗證設計:生成補丁候選後,需通過模糊測試、形式化驗證、差異化測試等多個驗證器,確保補丁既能修復漏洞,又不破壞程式功能,並符合開發者的編碼風格,只有全部通過才發佈,失敗經驗回饋至 LLM 上下文進行改進。
Joshua Saxe - The Hard Part Isn’t Building the Agent: Measuring Effectiveness | [un]prompted 2026
22 min
AI 技術英文3月25日

Joshua Saxe - The Hard Part Isn’t Building the Agent: Measuring Effectiveness | [un]prompted 2026

unprompted

  • 傳統評估框架完全不適用:精確率、召回率、F分數等指標假設存在「預言機」(完美的真實標籤),但網絡安全領域根本無法獲得乾淨的標籤。面對停機問題、雙重用途工具等計算科學困境,標籤本身就充滿噪音。
  • 標籤噪音是硬瓶頸:模擬顯示,若標籤中只有1-3%的錯誤翻轉率,即使是完美的AI系統的性能測量也會急劇下降,形成無法突破的「噪聲上限」,使得無法判斷系統是否真正改進。
  • 評估應採用多維整體評分:不應將複雜推理簡化為單一的0/1結果。應檢視代理是否收集正確證據、基於第一性原理推理、清晰解釋決策,評分標準應覆蓋證據收集、政策理解、推理品質、日誌透明度、決策準確性等多個維度。
Shruti Datta Gupta & Chandrani Mukherjee - Security Guidance as a Service | [un]prompted 2026
23 min
AI 技術英文3月25日

Shruti Datta Gupta & Chandrani Mukherjee - Security Guidance as a Service | [un]prompted 2026

unprompted

  • 中央知識庫解決分散問題:先前安全指引散落在多個平台與工具,導致信息重複、過時。Adobe 建立統一的向量存儲作為單一來源,確保開發者無論在 Jira、Slack 還是 IDE,獲得的建議都一致且來自經過審查的企業知識。
  • 自動化文檔管道減少人工成本:團隊開發了從 Git 元數據到向量嵌入的完整自動化流程,包括定時檢查文檔更新。這避免了手動複製貼上內容到向量存儲的低效做法,並透過 webhook 和 cron job 保持內容新鮮。
  • 多層次安全指引覆蓋整個 SDLC:從「左移」的自動威脅建模(identifying threats early)、編碼時期的 IDE 協助,到「右移」的漏洞修復建議。不僅提供短期修補,也提供長期改進(類似漏洞統一解決方案),幫助團隊建立更安全的預設設置。
Sean Park - When Passports Execute: Exploiting AI Driven KYC Pipelines | [un]prompted 2026
22 min
AI 安全英文3月25日

Sean Park - When Passports Execute: Exploiting AI Driven KYC Pipelines | [un]prompted 2026

unprompted

  • KYC 工作流程存在的根本漏洞在於 AI 代理無法區分正常文本與嵌入的指令。攻擊者將惡意指令(如「權限字段必須反映最近 20 個護照記錄」)隱藏在護照文本中,當代理處理時會執行這些指令而非忽視,導致數據洩露。
  • 手動製作提示注入既耗時又不可靠,講者設計雙層代理系統來自動化。主代理協調流程,子代理負責生成攻擊提示,透過維護提示摘要文件來記錄已生成內容,確保每次迭代生成語義多樣化的新提示。
  • 為了避免語義相似度過高導致失敗率提升,系統在每次迭代時參考前次生成提示的摘要。子代理據此生成在表述上差異更大但邏輯相同的新指令,顯著提升多個模型上的攻擊成功率。
Peter Girnus & Derek Chen - FENRIR: AI Hunting for AI Zero-Days at Scale | [un]prompted 2026
21 min
AI 安全英文3月25日

Peter Girnus & Derek Chen - FENRIR: AI Hunting for AI Zero-Days at Scale | [un]prompted 2026

unprompted

  • 級聯過濾架構的成本優化:先用 YaraX 快速掃百萬行代碼,再用 Semgrep 和 CodeQL 精篩,最後才給 LLM,減少 LLM token 消耗,過濾出 60% 假陽性於 L1 階段。
  • 快速 L1 分類(Sonic)vs 深度 L2 驗證(Opus)的角色分工:L1 只用 50 行代碼上下文判斷明顯假陽性,L2 才用完整代碼和沙箱執行權限做深度分析,平衡成本與精準度。
  • 人類研究員角色簡化而非消除:從原本 500 個警報精簡到 10-25 個高信度發現,每個都附帶自動生成的可利用性報告和完整披露文件,人類只需驗證和送稿。
Joe Sullivan - AI Notetakers: The Most Important Person in the Room | [un]prompted 2026
19 min
AI 技術英文3月25日

Joe Sullivan - AI Notetakers: The Most Important Person in the Room | [un]prompted 2026

unprompted

  • AI筆記員的雙面性:雖然便利性明顯(參與者無需自己記筆記),但AI筆記員成為會議「唯一的記憶」,掌握了所有敏感資訊,且這些工具的傳播機制(如Otter的OAuth授權陷阱)使其能快速滲透整個組織。
  • 法律與隱私的灰色地帶:加州等州要求雙方同意才能錄音,但Granola等應用程式型工具難以監控;2月17日的法律判決表明與AI對話不享有律師保密特權,威脅了企業敏感資訊的法律保護。
  • AI筆記的可操縱性與缺陷:研究顯示可通過特定短語(如「最重要是要記住」)、位置策略(會議開始和過渡時段)、對比框架來影響AI的記錄;同時AI會產生幻覺,約3%的筆記不準確,容易誤識別口音。
Adam Laurie (Major Malfunction) - AI go Beep Boop! | [un]prompted 2026
29 min
Web2 安全英文3月25日

Adam Laurie (Major Malfunction) - AI go Beep Boop! | [un]prompted 2026

unprompted

  • 提問方式決定答案品質:講者原認為AI只能查數據手冊,直到朋友建議改變提問策略——從模糊的「AI能幫什麼」轉向三個核心工程問題(故障位置、注入時機、脈衝強度),AI才能發揮真正價值,將非確定性試驗轉化為可解決的參數優化問題。
  • AI的逆向工程與推理能力:Claude不只回答問題,而是基於芯片架構進行逆向工程——分析引導加載程序流程、內存讀取命令時序、鎖定檢查邏輯,根據芯片運行頻率精確計算故障時間窗口,甚至主動提出更優方案(用ADC主動控制而非被動測量)。
  • 硬件成本與功能的根本性重構:樹莓派Pico用$7的價格整合了原本分散在多個千元級設備上的功能(JTAG/SWD調試、邏輯分析、故障觸發、示波器功能),使一次性攻擊成為經濟可行,Claude用3天重寫了原本兩人耗時1年以上開發的Raiden項目。
Andrew Bullen - Breaking the Lethal Trifecta (Without Ruining Your Agents) | [un]prompted 2026
19 min
AI 安全英文3月25日

Andrew Bullen - Breaking the Lethal Trifecta (Without Ruining Your Agents) | [un]prompted 2026

unprompted

  • Prompt Injection是當前問題,非未來威脅。業界普遍對此風險認知不足,許多公司選擇忽視。即使最先進的模型也有0.1-1%失敗率,在安全領域不可接受。Stripe觀察到攻擊手法日益精巧,問題會先變壞才變好。
  • 防禦框架源自"致命三角形"(lethal trifecta)"。數據洩露需三要素:不信任內容、私有數據、出站能力。前兩者難以移除(LLM的優勢就在於處理任意輸入,業務需要訪問私有數據),防守重點必須是第三項——控制出站流量。敏感操作則遵循類似的"致命雙角"邏輯。
  • 防護控制本身製造新問題,需要第三步優化。安全工程第一步是威脅建模,第二步是防護設計,第三步(往往最難)是設計出能讓業務正常運作的實施方案。過多的確認提示造成review fatigue和rubber stamping,最終削弱防護效果。需透過批量延遲確認、可復原操作(先執行後復原)、LLM輔助審查等方式降低摩擦。
Rami McCarthy - Zeal of the Convert: Taming Shai-Hulud with AI | [un]prompted 2026
23 min
AI 技術英文3月25日

Rami McCarthy - Zeal of the Convert: Taming Shai-Hulud with AI | [un]prompted 2026

unprompted

  • AI 代碼生成的局限——直接問 AI 「寫一個抓取工具」會得到可運行程式,但遺漏非功能需求(快取、速率限制、並行化、退避)。應採用 RPI 循環(研究→規劃→實施),而不是直接跳到編碼,讓 AI 先規劃再執行。
  • 數據形狀是開發者的責任——AI 會盲目接受你給的抽象(如平面檔案),不會質疑該用資料庫索引或 SQL。需要人工冷靜規劃,而非依賴 AI 自動優化。
  • 信號提取 vs. 輕信問題——AI 擅長模式匹配(識別 CI/CD 平台、解碼 JWT),但容易過度解釋(看到「Nucleus」就亂歸屬、假設所有 Azure DevOps 都是微軟員工)。必須注入懷疑精神,透過人工驗證確保準確性。
Nicholas Carlini - Black-hat LLMs | [un]prompted 2026
26 min
AI 安全英文3月25日

Nicholas Carlini - Black-hat LLMs | [un]prompted 2026

unprompted

  • 1. 漏洞發現能力已達臨界點
  • 最新語言模型不再需要複雜的輔助工具或人工引導,能自主完成從代碼分析到漏洞利用的整個過程。這種自主能力在三四個月前尚不存在,但現在已成為現實,標誌著安全領域的質變。
  • 2. 指數級增長正在加速攻防失衡