KeyFrame內部研究專用

Let AI Handle Your Entire Workflow? ChatGPT’s Latest Super Useful Feature Tutorial! | VS MEDIA x ...

VS MEDIA Taiwan13 min中文
觀看原始影片

三句話摘要

ChatGPT 的 Record & Replay 功能如何讓 AI 學習並自動執行重複性任務。 Record & Replay 讓 AI 從被動的執行者升級為主動的流程學習者,只要設定清楚的邊界,就能自動化看似複雜的多步驟工作,減少重複性勞動。 技能自動化的核心:不只是錄屏,而是讓 AI 理解你的操作思路與流程邏輯。錄製越直接清楚(避免中斷或切換任務),AI 學習效果越好。

重點整理

  1. 技能自動化的核心:不只是錄屏,而是讓 AI 理解你的操作思路與流程邏輯。錄製越直接清楚(避免中斷或切換任務),AI 學習效果越好。

  2. 跨平台操作能力:AI 可直接操作桌面應用、瀏覽器、Google 表格、Excel 等,甚至需要時會自己判斷用替代方案(如 Google Sheet 失效時改用瀏覽器輸入)。

  3. 邊界設定重要:在錄製時告訴 AI 哪些情況需停止並確認(驗證碼、敏感資料、確認訊息),可大幅提升自動化的可靠性與安全性。

  4. 對話優化技能:建立技能後可與 AI 溝通優化指令,如「之後直接完成訂票,只報告車次即可」,AI 會更新技能包的執行邏輯。

實用技巧與重點

  • 功能安裝:ChatGPT 桌面版 → Work 模式 → 搜尋 Recorder Skill → 安裝
  • 錄製限制:最多 30 分鐘內容;避免操作中斷(接 Line、Facebook)
  • 建議做法:事先登入網站、直線式操作、設定明確的停止條件
  • 案例流程:
  • 台鐵訂票:查詢時刻表 → 選票 → 填登入/信用卡驗證時停止
  • 發票整理:手機拍照 → AI 辨識 → Google 表格自動填入
  • 團購管理:LINE 群組收集訂單 → Excel 整理 → 自動計算總價
  • Excel 整合:需在增益集安裝 ChatGPT 應用程式(應用程式商店搜尋 OpenAI 官方)
  • 遠端協作:可配對手機與電腦版 GPT,由電腦遠端完成驗證與確認動作

結論

Record & Replay 讓 AI 從被動的執行者升級為主動的流程學習者,只要設定清楚的邊界,就能自動化看似複雜的多步驟工作,減少重複性勞動。

完整解析

ChatGPT 的 Record & Replay 功能解決了 AI 難以理解複雜多步操作流程的問題。傳統上,用戶很難用文字描述「如何線上訂火車票」或「怎樣整理發票到試算表」,但這個功能讓 AI 直接透過觀察你的操作來學習。講者先從最基礎的安裝開始——在桌面版 ChatGPT 的 Work 模式下找到 Recorder Skill,按下安裝即可。

第一個示範是台鐵訂票。講者錄製了完整的訂票流程:選擇日期、出發地(桃園)、目的地(台北)、時間範圍,然後選擇票次。AI 從這次錄製中學到了邏輯,創建了一個名為「Book Taiwan Rail Tiki」的技能。隨後,講者叫 AI 直接訂票時,AI 在瀏覽器中自動操作,甚至在遇到 ReCAPTCHA 驗證時懂得停下來求助。這展示了 AI 不只是重複動作,而是理解了流程中的風險點。

第二個示範是發票整理。講者用手機拍攝高鐵票照片,請 AI 將金額、日期等資訊輸入到 Google 表格。AI 先嘗試直接調用 Google Sheet 的 API,失敗後自動改用瀏覽器方案,逐欄位填入資訊。這說明 AI 具備靈活的替代方案能力。當講者後來上傳兩張發票時,AI 更是分別辨識、逐一新增,沒有重複遺漏。

第三個示範涉及 LINE 群組的團購管理——這是最具挑戰性的場景。講者錄製了從群組訊息提取訂購人名、商品、金額,整理到既賬檔案的全流程。之後每當有新的團購時,只要指示 AI 使用這個技能,AI 就能自動監看 LINE、提取新訊息、更新 Excel。值得注意的是,講者先在 Excel 增益集中安裝了 ChatGPT 官方應用程式,確保 Excel 能與 ChatGPT 通訊。過程中 AI 甚至主動寫出 Excel 公式計算總價,展示了它不只會執行錄製的動作,也理解任務背後的邏輯。

整個過程的成功關鍵在於邊界設定。講者強調了在錄製時要告訴 AI 何時停止(如遇驗證、需要確認),避免 AI 自行決定敏感操作。同時,建立技能後可與 AI 對話微調指令,例如「之後別問那麼多,直接完成」,AI 會更新執行邏輯。這種互動的優化過程讓技能越來越精準。

8 min
AI 技術中文11月17日

Muse AI 国内注册方法来了!无需排队、无需信用卡,全程免费!

一路向前看原片 ↗
  • IP環境是核心要素:乾淨的住宅IP搭配日本節點能大幅提升註冊成功率,講者稱日本節點「幾乎秒過」,可選美國但成功率較低。
  • 全新郵箱是必要條件:系統會記錄每個郵箱的註冊歷程,曾排隊或卡在信用卡驗證的信箱會直接失敗,必須使用全新未註冊過的郵箱才能完全規避之前的失敗記錄。
AI 技術中文11月17日

Meta 改写 K-Means,训练轮次降到十分之一​ | K-Means | e-means | Meta FAIR | 聚类算法 | 向量检索 | Faiss | DINO10B | 向量数据库

Best Partners TV看原片 ↗
  • 從累加到衰減的中心維護:傳統小批量更新會累積歷史統計量造成早期分配記錄長期影響,而 e-Means 用指數移動平均使新分配能即時調整中心,早先統計逐漸失效,避免陷入次優解。
  • 死簇復活機制是關鍵改進:消融實驗顯示這項改動影響最大,透過每 5 批次檢查樣本不足的中心,從較大簇拆分一半重新安排,將樣本不足 10 個的中心比例從 26.3% 降到 0.3%。
AI 技術英文11月17日

Goal Engineering - The New Buzzword

Prompt Engineering看原片 ↗
  • 長期開放式目標中最難提供的上下文不是文件或 API,而是人類的判斷力與品味。傳統的檔案查詢或技術規格是相對容易部分,真正瓶頸在於定義「什麼是好的結果」。
  • Actively AI 初期採用單一代理處理多種任務類型失敗,因為人類審查者必須在十種不同的任務格式間切換心智模式,造成效率低落。重新架構為多個專一代理後,人類可在相同心智模式下快速連續審查。