Raycast Screen Awareness 將成個視窗交畀 AI，慳幾步但私隱要睇實

少幾步，實際差別可以好大

問 AI 時，好多時間其實花咗喺整理背景：複製錯誤訊息、截圖、交代自己睇緊邊個畫面，再等模型估兩者有咩關係。Raycast 喺 macOS v2 beta 0.71 加入 Screen Awareness，撳一下快捷鍵就會開 AI Chat，連而家視窗嘅內容一齊附上。功能本身唔算驚天動地，不過佢將「睇畫面、執資料、問 AI」壓成一個動作，對成日喺幾個 app 之間跳嘅人幾實際。

圖片：Raycast

佢交畀 AI 嘅內容多過一張截圖

Screen Awareness 會按情況收集 app 名稱、視窗標題、系統 Accessibility 介面讀到嘅文字、反白選取內容、游標所在欄位同欄位值，再加而家視窗截圖。喺 Finder 揀咗檔案，佢亦可附上檔案路徑；裝有 Raycast Browser Companion 嘅瀏覽器，仲可交出分頁標題、網址同頁面文字，範圍可以多過畫面當刻顯示嗰一截。附件卡會列出實際收咗咩，送出前最好撳入去望一眼。

用法上，例如開發者望住 IDE 或 Terminal 報錯，可以直接問錯喺邊；處理電郵時反白一段內容，再叫 AI 草擬回覆；睇緊內部儀表板，亦可叫佢解釋圖表同畫面文字。模型答得準唔準仍然要睇模型能力同 app 有幾多內容可經 Accessibility 讀到，但至少唔使每次人手拼埋背景，日常用會慳到唔少時間。

舊有指令升級，再包成一套入口

Raycast 原本已有 Send Focused Window to AI、Send Selected Text to AI、Send Screen Area to AI 同 Send Screen to AI。今次最主要改動，係 Send Focused Window to AI 加入更完整嘅結構化背景，再配合 @screen-awareness AI Extension，等 AI 喺對話途中按要求讀取前置視窗。手動附加 screenshot 主要得像素，Screen Awareness 就會同時嘗試提供可直接理解嘅文字、選取內容、欄位同視窗資料，所以模型少咗靠 OCR 同估畫面關係。

講到底，Raycast 主要係擴充原有擷取指令，再接入 AI Chat、Quick AI、快捷鍵同 Extension，並唔係長期監看桌面。好處係快同完整；限制亦好直接，Accessibility 讀唔到嘅 app、受保護內容或者複雜畫面，最後仍然可能只剩一張截圖畀模型判斷。

暫時只可確認 macOS v2 beta

官方更新紀錄將 Screen Awareness 列喺 macOS v2 beta 0.71，發布日期係 2026 年 8 月 11 日。說明文件有顯示 Command／Ctrl 快捷鍵，但 Windows 更新紀錄暫時未見同一功能公告，所以現階段唔應該當佢已經喺全平台同步推出。Raycast 將功能標示為 beta 期間免費；Mac v2 同 Windows beta 嘅基本 AI 現時亦可免費用 GPT-5.4 mini，受每分鐘同每小時用量限制。測試期後點收費，官方暫時冇承諾。

想用其他模型或者較高用量，Raycast Pro 月付係 10 美元，年付折算每月 8 美元；Advanced AI 另加每月 8 美元。換句話講，Screen Awareness 而家冇獨立收費門檻，但長期價值要等 Raycast 公布 beta 完結後安排。只係偶爾問畫面內容，人手截圖貼去現有 ChatGPT 或 Claude 已經做到；高頻使用者先較容易感受到少幾次切 app 同複製貼上有幾值錢。

「按先擷取」唔代表資料留喺部機

Raycast 話功能只會喺用戶執行指令、加入附件或者叫 AI 讀畫面時擷取，唔會喺背景監看；亦可以逐項停用指令同 @screen-awareness Extension，或者喺 macOS 撤回 Screen Recording、Accessibility 權限。Screen Recording 係選用，關掉之後仍可讀取 app 文字；Accessibility 先係核心權限，冇咗就讀唔到視窗內容。呢套設計安心過持續監看，但擷取一刻仍可包埋密碼欄附近資料、客戶名單、未公開程式碼同內部網址。

仲要分清楚擷取同送出兩個階段。官方話擷取結果本身唔會喺背景儲存，但當你送出訊息，內容會按一般 Raycast AI 附件處理：文字同相關背景會經 Raycast 基建送去所選 AI 供應商，圖片附件則會安全上傳到 Raycast server，方便日後喺對話重開，直至你刪除訊息或對話。官方亦話供應商唔可用內容訓練模型。公司環境有保密要求嘅話，應先由 IT 決定可唔可以用，個人用戶就至少要養成送出前檢查附件卡嘅習慣。

Screen Awareness 最啱成日處理程式碼、電郵、文件同網頁資料，又已經用 Raycast 做主要啟動器嘅人。低頻用戶繼續手動附加截圖，實際只係多兩三步；高頻用戶就可能靠一個快捷鍵慳返大量瑣碎操作。下一步要睇 Windows 幾時正式加入，同 beta 完結後 Raycast 會點劃分免費同 Pro 用量。

參考來源

• 9to5Mac — Raycast adds a new way to ask AI about whatever is on your screen — original report
• Raycast v0.71：Screen Awareness — 官方更新紀錄，確認版本、日期同新增項目
• Raycast Manual：Screen Awareness — 官方詳列擷取內容、指令分別、權限同停用設定
• Raycast AI Privacy & Security — 確認 AI 供應商、圖片附件儲存同模型訓練政策
• Raycast AI Usage Limits — 核對 Mac v2、Windows beta 免費 AI 用量同 Pro 限制
• Raycast Pricing — 核對 Pro、年付折扣同 Advanced AI 收費

本文根據原文及公開資料整理；資料有出入時，以原文及官方資料為準。