KeyFrame內部研究專用

Apple WWDC 2026 June 8: Introducing Siri AI and more

Apple·6月8日週一·76 min中文

三句話摘要

Apple WWDC 2026 主題演講:全面升級的系統效能、兒童安全工具,以及由 Apple Intelligence 驅動的全新 Siri AI 正式亮相。 Apple 這次以 Google Gemini 技術為基礎重建 Apple Intelligence 架構,將 Siri 從語音快捷鍵升級為真正能跨 App 串聯個人情況、持續對話、主動代理的 AI 助理,同時用底層系統重構兌現「讓舊裝置也更靈敏」的承諾。 系統效能全面提升

重點整理

重點
  • 1

    系統效能全面提升

  • 2

    Apple 不只推出新功能,更針對 CPU 排程器、記憶體、網路、搜尋索引等底層架構進行重構。舊款 iPhone(最低支援至 iPhone 11)也受惠於更先進的 CPU 排程器,讓裝置體驗更靈敏,而非只有新機型獨享。

  • 3

    兒童安全成為核心政策主軸

  • 4

    Apple 大幅擴充「螢幕使用時間」與「兒童帳號」功能,依據美國兒科學會建議提供分齡使用時限、排程管理與詢問可否瀏覽等家長工具。開發者也必須透過新 API 為 App 內容實施年齡分層保護,這是從系統層到 App 層的全面兒童安全部署。

  • 5

    Apple Intelligence 架構升級:與 Google 合作引入 Gemini

  • 6

    新一代 Apple 基礎模型結合 Google Gemini 幕後技術共同打造,支援裝置端與私密雲端運算,具備多模態能力(文字、影像、語音)。所有運算承諾不儲存、不存取用戶資料,且可接受外部專家驗證。

  • 7

    Siri AI 從語音助理進化為全平台智慧代理

  • 8

    Siri AI 可跨 App 串聯個人情況(聯絡人、訊息、照片、行事曆),支援多輪對話、App 動作執行、視覺智慧與書寫工具整合,並有專屬 Siri app 保存對話記錄,讓 Siri 從單次指令型助理升級為持續性個人代理。

實用技巧與重點

乾貨
  • 具體數字
  • App 啟動速度提升最高 30%
  • 新照片載入速度提升最高 70%
  • AirDrop 傳送速度提升最高 80%
  • iPad 檔案傳輸至外接硬碟速度提升最高 5 倍
  • iOS 27 支援至 iPhone 11(史上最廣 iOS 支援範圍)
  • 家庭攝影機新支援 4K 解析度片段回放
  • 影像生成功能有每日用量限制;iCloud+ 訂閱方案提供更高取用權限
  • 工具 / 模型 / 平台名稱
  • Apple 基礎模型(與 Google Gemini 技術合作打造)
  • 私密雲端運算(Private Cloud Compute)
  • Core AI 架構(全新跨平台本地模型執行框架)
  • 影像樂園 API(Image Playground API,對開發者開放)
  • 宣告年齡層資訊 API(Declared Age Range API)
  • Xcode 編碼輔助程式(支援 Gemini、串聯 Figma 與 GitHub)
  • Device Hub(整合模擬器與真實裝置的測試介面)
  • Siri app(專屬對話記錄 App,跨平台 iCloud 同步)
  • 功能 / 步驟 / 方法名稱
  • Liquid Glass:新增透明度滑桿,可從超透明調至完全不透明
  • 空間重構(Spatial Recompose):照片 App 新功能,事後調整拍攝視角與構圖
  • 延伸工具(Extend):擴展照片邊界,修正歪斜水平線
  • 清除工具升級:移除干擾物件,畫質大幅提升
  • 詢問可否瀏覽(Ask to Browse):13 歲以下預設啟用,家長審核孩子要瀏覽的網站
  • 通訊安全功能:偵測裸露、血腥暴力內容,包含 FaceTime 即時通話
  • 使用時限:娛樂、遊戲、社群媒體三大類別,依年齡給出每日建議時限
  • Safari 通知我功能:以自然語言指定監控網頁更新條件
  • Safari 描述延伸功能:以自然語言描述即可建立自訂瀏覽器延伸功能
  • 密碼 App 自動更新:一鍵批量將弱密碼自動更新為高強度密碼
  • 捷徑 App 自然語言建立:用描述句子即可生成完整自動化流程
  • 通話情境功能(Call Context):致電企業時自動顯示來自 App 的相關資訊(完全裝置端執行)
  • 家庭 App AI 攝影機:生成影像文字描述、跨攝影機語意搜尋、無縫串聯多視角
  • 案例關鍵細節
  • Siri 示範:搜尋 Suki Waterhouse 演唱會 → 設定抽籤提醒 → 播放新歌,一氣呵成
  • Siri 示範:從照片 App 篩出有 Bryce、Madison、Quinn 的牧場照,直接加入家人共享相簿
  • Siri 示範(Mac):同時分析三份不同格式的倉庫報價單,整合訊息中提到的電力問題後推薦最佳選項,並草擬加速完工的友善委託信
  • 視覺智慧示範(visionOS):看著背包詢問能否當隨身行李搭乘 9 月冰島航班,Siri 結合個人航班資訊給出明確答覆

結論

結論

Apple 這次以 Google Gemini 技術為基礎重建 Apple Intelligence 架構,將 Siri 從語音快捷鍵升級為真正能跨 App 串聯個人情況、持續對話、主動代理的 AI 助理,同時用底層系統重構兌現「讓舊裝置也更靈敏」的承諾。

完整解析

詳細

本次 WWDC 2026 主題演講以「讓科技更個人化、更強大、更易用」為軸心,從三個層面展開:系統細節打磨、兒童安全強化,以及以全新架構驅動的 Apple Intelligence 重大升級。

在系統層,Apple 這次不只推出功能清單,而是徹底翻修底層架構。設計面上,去年引發爭議的 Liquid Glass 介面新增透明度調整滑桿,讓用戶可從超透明連續調至完全不透明;側邊欄延伸至視窗邊緣、工具列趨於一致、App 圖像直接融入多層次 Liquid Glass 折射效果,整體視覺更為統一清晰。效能面上,CPU 排程器大幅最佳化,且罕見地往下支援至 iPhone 11,使 iOS 27 成為有史以來覆蓋裝置最廣的 iOS 版本。搜尋架構也全面重建,新的語意索引讓 Spotlight、照片與郵件的搜尋結果更即時、更精準,舊郵件也能優先顯示在搜尋結果最上方。

兒童安全方面,Apple 以美國兒科學會的研究為基礎,推出一套從帳號設定到 App 生態系的全面性家長工具。核心起點是「兒童帳號」,建立後即自動套用全系統年齡保護措施。家長可透過全新「使用時限」功能,依娛樂、遊戲、社群媒體三大類別設定每日建議上限;透過「詢問可否瀏覽」功能,在孩子造訪新網站前要求家長審核;通訊安全功能則可偵測裸露及血腥暴力內容,涵蓋 FaceTime 即時通話。Apple 同時要求開發者透過新 API 在 App 層實施分齡保護,形成從系統到應用的完整防護鏈。

Apple Intelligence 的架構今年出現重大轉折:Apple 宣布與 Google 深度合作,引入 Gemini 系列模型幕後技術,共同打造新一代 Apple 基礎模型,同時推出威力更強的第二代裝置端模型,支援語音、文字、影像的多模態理解與生成。建立於此架構之上的 Siri AI,是本次最核心的功能發布。新版 Siri 跳脫「單次指令執行」的舊模式,具備跨 App 串聯個人情況(聯絡人、照片、訊息、行事曆)、感知當前螢幕內容、執行 App 動作,並能進行多輪對話、協作規劃(如看球派對菜單設計)與文件分析(如比較多份報價單)。Siri AI 同步推出專屬 App,對話記錄以私密方式同步至 iCloud,讓用戶跨裝置無縫延續對話。

App 層的 AI 整合同樣全面展開:Safari 可自動分類標籤頁、監控指定網頁更新;密碼 App 可批量自動更新弱密碼;照片 App 推出「空間重構」功能,結合裝置端空間模型與私密雲端生成模型,讓用戶事後調整拍攝視角,填補新增空白區域的內容與原始場景保持一致;捷徑 App 則可透過自然語言描述,由 AI 自動組合系統與 App 動作建立完整自動化流程。影像樂園升級後支援逼真圖片生成與觸控精修,並對開發者開放 API。所有 AI 功能均以「裝置端處理優先、私密雲端運算為輔」為隱私承諾核心,且可接受外部驗證。

關鍵時刻

Pipeline v2

帶時間戳的重點,會在逐字稿層級分析上線後產生。目前請先透過原始影片觀看。

事實查核

Pipeline v2

說法查證是下一次管線升級的一部分。KeyFrame 只會顯示它真正能驗證的內容。

更多「AI 技術」的內容

🔬“We have foundation models for language, not for physics” — Anima Anandkumar, Bren Professor of Computing
編輯精選
83 min
AI 技術英文PODCAST8月26日

🔬“We have foundation models for language, not for physics” — Anima Anandkumar, Bren Professor of Computing

Latent Space

  • 加速傳統物理模擬的典範轉移:氣象科學家原本認為 AI 無法匹敵數十年的物理建模工作,但傅里葉神經算子不僅達到同等精度,還快了一萬多倍。原本需要超級計算機的計算現在用消費級 GPU 就能完成,這改變了整個領域的思維方式。
  • 傅里葉域的非局部現象捕捉:傅里葉域能有效表示非局部現象(如大氣河流跨越千里的影響),且計算複雜度為準線性,遠優於完全連接的全局模型。這特別適合流體動力學、量子化學等自然現象中普遍存在的非局部相互作用。
  • 多解析度連續函數表示:神經算子將輸入輸出視為連續函數而非固定維度向量,可在推論時以任意解析度查詢,並能在更高解析度上疊加物理約束或額外數據,克服了固定解析度神經網路的限制。
Between Two Nerds: Attribution is dead, long live attribution
32 min
AI 技術英文PODCAST8月25日

Between Two Nerds: Attribution is dead, long live attribution

Risky Business

  • 工具成本的破壞性下降 — 傳統上,攻擊者必須重複使用昂貴自製的惡意軟體或工具組,因為開發和維護成本極高。這種成本結構使得安全研究人員可以通過工具特徵和程式碼簽名來追蹤攻擊者。LLM 自動化了代碼生成與維護工作流,使得攻擊者可以輕易為每個目標生成新工具,或改用通用系統工具,導致傳統的工具特徵分析失效。
  • 所有取證證據都在攻擊者掌控之中 — 無論是使用的 IP 位址、惡意軟體類型或戰術流程,這些都是攻擊者的主動選擇。即使看似是隨機巧合,攻擊者仍有能力在事前決定留下什麼痕跡。因此,所有可恢復的取證證據本質上都是攻擊者願意暴露的信息。
  • LLM 削弱工具簽名但保留高階行為特徵 — LLM 經過公開駭客技術訓練,使不同使用者產生相似的攻擊模式。然而,勒索軟體集團、國家級行為者的受害者選擇、贖金要求方式或目標模式等高階特徵仍具有識別價值。例如,鎖定加密交易所的攻擊幾乎只能指向朝鮮。
Why the Next AI Breakthrough May Come from Physics with Max Welling - #774
55 min
AI 技術英文PODCAST8月25日

Why the Next AI Breakthrough May Come from Physics with Max Welling - #774

TWIML AI

  • 多層篩選的材料設計流程:先搜尋文獻資料庫找現有材料,若無合適的就用生成模型產生數十萬個候選分子,用機器學習力場進行分子動力學模擬篩選,再進行實驗驗證。這套流程相比傳統量子力學計算能加速效率數個數量級。
  • 生成AI與熱力學的數學等價性:資訊論是兩個領域的共同基礎,生成模型的擴散過程與非平衡統計力學描述資訊損失的過程在數學上完全對應,許多開發出來的方法工具在兩領域都有精確對應的形式。
  • 基礎模型的遷移學習策略:先在廣泛材料資料集上訓練基礎力場表示,再針對特定材料類別進行蒸餾微調,既能保持計算效率也能獲得專一性。