Google DeepMind替AI時代重塑沿用60年的滑鼠游標

Google DeepMind表示，現有AI工具多獨立於專屬視窗，使用者的操作繁瑣且會打斷工作流程。Magic Pointer的目標是讓AI主動融入所有應用程式，使用者無須「繞道」，只要指向、點選、說話，AI就能即時回應，維持工作連續性。

Magic Pointer採用Gemini模型，能自動捕捉游標周圍的視覺與語意脈絡，讓電腦看懂使用者指向的詞句、圖像局部或程式碼。它結合「指向+語音」的自然互動，將螢幕上的像素轉為可操作的實體，例如把照片中的手寫便條變成待辦清單。

Gemini模型的多模態能力讓Magic Pointer得以即時解析螢幕上的視覺與文字資訊。系統會根據游標位置自動判斷使用者關注的目標類型，例如日期、地址、商品或人物，並在背景完成語意理解與回應準備，全程無需使用者撰寫任何提示詞。

Magic Pointer的操作極為簡單，使用者只需將滑鼠游標移至目標上，無須點擊左鍵或右鍵，直接以語音說出需求即可。例如在Chrome中，游標指向產品圖片後說「跟頁面上其他類似產品比較」，系統即會自動分析；或是指向客廳照片說「把這個沙發放這裡」，即時合成模擬畫面。在Googlebook上，指向電子郵件日期說「建立行事曆」，或指向PDF說「摘要」，全程無需框選、打字或撰寫任何提示詞。

首批搭載Magic Pointer的Googlebook預計於2026年秋季上市，合作夥伴包括宏碁、華碩、戴爾、惠普與聯想等五大品牌。除了Googlebook，Google也正逐步將Magic Pointer導入Chrome瀏覽器，讓使用者無論在何種裝置上都能享受指向即互動的AI體驗。