Google 旗下 Gemini AI 的行動裝置自動化操作功能迎來最新進展,測試系統中被揭露的目標應用程式(App)數量已擴展至 134 款。除了一般叫車與餐飲外送服務,連同工作必備的辦公工具以及台灣地區廣泛使用的通訊與電商軟體均包含在內,象徵生成式 AI 跨 App 自動執行的應用範疇正不斷擴大。
曝光名單涵蓋跨國與在地服務
在最新版本的 Android 系統封包中,技術人員挖掘出由系統端下發的內部指定 App 名單。該列表先前已累積 114 款項目,隨後在最新的測試版本中又增加 20 款實驗性目標,總數達到 134 款。這份清單覆蓋了生活消費、日常通訊與企業生產力等多個面向,包含 Microsoft Word、Excel、Slack、LINE 以及蝦皮購物等平台都名列其中。
雖然多種熱門軟體已被納入規劃範圍,但列入名單並不代表使用者目前能立即體驗完整功能。部分已被記錄在系統內部的辦公軟體,在進行實際操作測試時仍會出現權限受限或無法直接開啟並編輯檔案的情況,顯見該項技術仍處於早期部署與權限適應的過度階段。
實測試驗成果與系統支援限制
在針對部分支援 App 的實測過程中,AI 展現了不同程度的自動執行能力。例如在特定的外送與生鮮採購平台上,系統能夠接手開啟介面、搜尋指定商家與商品、設定數量並自動加入購物車,最終再交由使用者親自完成結帳流程。然而對於安全層級要求較高或功能相對複雜的軟體,目前僅能做到啟動應用程式或提供跳轉連結。
這項自動化機制主要在手機上的獨立虛擬環境中運行,藉此降低對裝置原本作業系統的干擾,且關鍵付費與送出動作仍需人工二次確認。目前該功能尚處於測試階段,使用限制相當嚴格:
- 硬體門檻:僅支援最新世代的旗艦智慧型手機與平板電腦,包括 Google Pixel 10 與 Pixel 11 系列,以及三星 Galaxy S26 系列與旗艦折疊機種。
- 地區與語言限制:目前僅限美國、英國、日本、韓國及印度等少數市場,並限定以英文、日文及韓文操作,台灣目前尚未納入首波開放名單。
- 帳號規範:使用者需年滿 18 歲,且僅支援個人 Google 帳號,企業或學校託管帳號暫無法啟用。
這代表什麼
過去 AI 助理多半以文字回答或單一指令導向為主,無法直接幫使用者在跨軟體之間完成複雜的手續。Gemini AI 自動操作技術的演進,代表行動裝置上的 AI 正從「對話式提供資訊」轉轉變為能實際執行指令的「AI 代理人(AI Agent)」。如果未來發展成熟,使用者只需說出一句話,系統就能完成比價、預訂或彙整檔案等連續性任務,大幅簡化行動裝置的操作流程。
對於台灣的中小企業與專業人士而言,這項技術若普及,將能顯著提升個人工作效率與業務處理速度。值得關注的是,台灣本土高頻率使用的通訊軟體 LINE 出現在測試陣容中,顯示國際大廠在規劃 AI 自動化情境時,已開始將亞洲市場的在地生態系納入考量。不過,由於跨 App 自動化涉及個人隱私與帳密安全,企業在評估引進相關工具時,仍需密切留意資訊安全與權限管控原則。
背景補充
Google 於今年上半年正式推出稱為任務自動化(Task Automation)的功能,目標是讓 Gemini 能夠理解智慧型手機使用者介面(UI)上的視覺元素與控制項。與傳統依靠開放 API 介面的連線方式不同,這類技術模擬真人在螢幕上滑動、點擊與輸入的行為,理論上能適用於任何未提供公開串接介面的第三方軟體。
隨著作業系統底層對 AI 操作權限的逐漸開放,如何在便利性與安全性之間取得平衡,成為各家科技巨頭發展行動 AI Agent 的最大考驗。雖然目前大部分曝光的功能仍屬於內部測試階段,但已確立了未來智慧型手機軟體互動模式的長期發展方向。
常見問題
Gemini AI 手機自動操作功能目前可以在台灣使用嗎?
目前該功能僅在美國、英國、日本、韓國與印度等少數地區開放測試,台灣目前尚未納入首波支援範圍。
哪些手機支援 Gemini AI 的自動操作功能?
目前僅支援最新世代的旗艦裝置,包含 Google Pixel 10/11 系列以及三星 Galaxy S26 與折疊手機系列。
Gemini AI 真的可以幫我自動傳送 LINE 訊息或自動編輯 Word 檔案嗎?
雖然 LINE 與 Microsoft Word 已列入內部測試名單,但實測顯示複雜應用的自動存取與檔案編輯仍受系統權限限制,現階段尚未開放完整的自動操作。