Googlebook Magic Pointer 拆包：Google 用 Gemini 預測你下一步
最多三個操作建議由螢幕內容即場生成，正式版仍有幾個關鍵缺口
游標變成 Gemini 嘅入口
Google 5 月公開 Googlebook，定位係結合 Android 技術底層、ChromeOS 經驗同 Gemini 嘅新筆電平台。當中最搶眼嘅 Magic Pointer，官方示範係郁幾下游標喚醒 Gemini，再按你指住嘅內容提供建議：例如指住電郵日期建立會議，或者揀客廳相同梳化相，直接合成擺位效果。Google 暫時只話 2026 年稍後會有更多消息，首批合作品牌包括 Acer、ASUS、Dell、HP 同 Lenovo，售價、地區同確實時間都未公布。
Android Authority 今次拆解 Magic Pointer app，佢哋明講未能喺現有 Android 裝置啟動個功能，資料主要來自 app 內文字同程式內容。當中見到 Magic Pointer 可能要把 Google app 設成預設助理，可以用 Meta + G 叫出，游標擺動亦有靈敏度設定同關閉選項。呢啲全部屬開發中發現，Google 未正式確認，推出前改走甚至停用都有可能。
圖片：Google
三粒按鈕背後係一套選項系統
拆包最有意思嘅部分，係 Gemini 收到所選範圍嘅文字、圖片或者兩者之後，要預測用戶下一步，再產生最多三粒操作按鈕。每粒按鈕最多 45 個字元，內容要具體、互有分別，情境唔清楚時可以少過三粒。內部規則把用途分成理解、轉換、構思同執行四類，例子包括整理電郵重點、草擬回覆、把數據變成表格、翻譯內容、規劃行程，甚至建立日曆事項。用戶揀中其中一粒後，相關要求會再交畀 Gemini 處理。
呢種設計最直接縮短咗幾個日常步驟。以往睇完長電郵，你可能要複製內容、開 Gemini、再諗點寫 prompt；Magic Pointer 嘗試喺游標旁邊直接擺出「整理決定」、「草擬回覆」或者「建議下一步」。睇文章、比較商品、執圖片同整理資料都可以用同一入口，連搜尋 query 都未必使自己由零開始組織。做得準的確方便，但建議一旦估錯，你仍然要改 prompt；實際慳到幾多時間，就要睇 Gemini 判斷畫面情境有幾準。
Google 同時控制咗你見到邊三個選項
拆包亦顯示現階段有明顯邊界：建議只可以揀 Gemini 做得到嘅事，唔應該要求外部軟件完成任務，亦唔會提供普通系統捷徑，例如叫你開 Chrome 或跳去某個 app。暫時睇，Magic Pointer 較似一個由 Gemini 驅動嘅 contextual launcher，離任意控制整個桌面仲有一段距離。最多三粒按鈕亦令建議排序變得好重要；第三方服務可唔可以接入 Gemini，可能直接影響佢有冇機會出現喺游標旁邊，而 Google 未交代呢個入口會開放到咩程度。
私隱同廣東話支援仍然未清楚
要理解你指住嘅內容，Magic Pointer 至少要把所選範圍變成 Gemini 可理解嘅 context，但 Google 未講處理會喺裝置定雲端完成，亦冇交代內容點保存。Google 現有 Gemini 手機版螢幕操作說明寫明，揀中建議後，畫面或檔案資料會上載畀 Gemini；Gemini 私隱說明亦話螢幕截圖會當成 prompt 內容處理。呢兩份文件唔代表 Magic Pointer 一定採用相同安排，不過公司電郵、客戶資料同私人相片成日會同時出現喺筆電畫面，Google 正式推出前要講清楚資料流向同管理選項。
拆包內嘅規則要求按指定語言產生建議，亦要配合文化語境，反映多語言輸出已經納入設計考慮，但當中冇確認支援廣東話指令。Google 現有 Gemini 手機版支援列表列出香港同繁體中文，呢點唔等於 Googlebook、Magic Pointer 或語音廣東話同步支援。中英文夾雜畫面會唔會照樣判斷準確，暫時同樣冇答案。下一步要等 Google 交代實際資料流、第三方 app 接入方法，同非英文環境嘅表現，先可以判斷呢支 AI 游標有幾實用。
參考來源
- Android Authority — Magic Pointer app teardown uncovers how this Googlebook tool actually works — original report
- Introducing Googlebook, designed for Gemini Intelligence — Google 官方公布 Googlebook 定位、Magic Pointer 示範、合作品牌同暫定發布節奏。
- Use screen actions to chat with the Gemini mobile app — Google 官方解釋現有 Gemini 螢幕操作點樣使用畫面內容，作為私隱分析嘅參考，唔代表 Magic Pointer 已確認採用相同機制。
- Gemini Apps Privacy Hub — Google 官方資料處理說明，交代 prompts、截圖、活動紀錄同連接服務資料點樣處理。
- Gemini 流動應用程式供應情況 — 核對現有 Gemini 手機版嘅香港供應情況同中文支援；資料唔可以直接套用落 Magic Pointer。
本文根據原文及公開資料整理；資料有出入時，以原文及官方資料為準。
