我花了九分鐘點了我的晚餐,但它仍然感覺像是未來。

我一直在測試 Gemini 在 Pixel 10 Pro 和 Galaxy S26 Ultra 上的新任務自動化功能,這讓 Gemini 首次能夠實際操作應用程式為你服務。目前它僅限於一小部分應用程式——幾種餐飲外送和叫車服務——而且仍處於測試階段。它很慢,有時很笨拙,而且它無法解決你使用手機時遇到的任何嚴重的問題。但它非常令人印象深刻,我認為說這是對未來的瞥見並非誇大其詞。我們還有很長的路要走,但這是第一次我在手機上看到一個真正的 AI 助理在運作——而不是在主題演講或在展覽廳內精心控制的演示中。

首先:Gemini 在使用手機方面比你、我或大多數人都慢得多。如果你現在就需要叫一輛 Uber,你仍然是最佳人選。不過,在你放棄之前,請記住任務自動化設計的目的是在你使用手機做其他事情時在背景執行。更好的是,它在你沒有看手機時也能繼續工作,所以你可以做一些事情,比如第十次檢查你的護照是否在你的包裡。

但如果你像我一樣好奇,你可以全程觀看。當它在工作時,螢幕底部會出現文字,顯示 Gemini 正在做什麼。例如「選擇第二份照燒雞肉套餐」,這是在星期六晚上我指示它訂購晚餐時發生的。看著 Gemini 在實際操作中摸索,老實說還挺酷的。我要求點一份雞肉套餐;菜單以半份為單位呈現選項,所以它正確地添加了兩份半份的雞肉。

當你開始使用 Gemini 進行自動化時,預設行為是在背景執行,這對你來說是最好的。如果你想觀看 Gemini 完成任務的過程,你必須點擊一個按鈕並打開另一個視窗。而且這可能會非常折磨人。看著電腦在 Uber Eats 的菜單上尋找一份蔬菜配菜,而它就擺在螢幕頂部,就像看恐怖電影一樣,你知道兇手就在主角旁邊的衣櫃裡。我的意思是,除了謀殺的部分。Gemini 在準備我的照燒訂單時走了幾次錯誤的路,最終它自己解決了,但整個過程花了將近九分鐘。並不理想。

Gemini 應該執行你的任務,直到需要點擊確認並訂購汽車或晚餐的時刻,這樣你就可以仔細檢查它的工作。我認為,這是目前使用此功能的唯一明智方式,而且我不介意完成訂單時增加的額外步驟。在我過去五天的測試中,我從未遇過它失控並自己完成我的訂單。而且它的準確度令人驚訝;我幾乎不需要對最終訂單做任何調整。如果它失敗了——我確實看到過幾次——它通常會在最初一兩分鐘內發生,當應用程式需要我的注意時,例如授權它使用我的位置,或者將送貨地點更改為家而不是內華達州,那是我上次使用該應用程式的地方。在這種情況下,我必須弄清楚問題所在,但一旦解決,我就能夠順利地重新啟動自動化。

這件事真的讓我印象深刻。我在日曆上安排了一個第二天飛往舊金山的航班(對我來說是虛構的旅行,但航班細節是真實的)。我給 Gemini 一個模糊的指示,要求它安排一輛 Uber,讓我在航班起飛前及時到達機場。由於 Gemini 可以存取我的電子郵件和日曆,它可以找到這些資訊。它確實需要一些額外的指導——可能是因為航班沒有像它預期的那樣出現在我的電子郵件中。但有了這些,它找到了航班資訊,建議在上午 11:30 或 11:45 出發(考慮到下午 1:45 的航班,而且我家離機場很近,這是合乎邏輯的時間),並詢問我是否想安排其中一個時間的乘車服務。我確認了時間,它在大約三分鐘內就完成了乘車服務的設定,我無需再提供任何進一步的輸入。

考慮到 Uber 甚至不稱之為安排乘車服務——你預訂乘車服務——這就更令人印象深刻了。這是我們一直在使用的數位助理與現在出現的 AI 助理之間的關鍵區別。能夠在與電腦交談時使用自然語言,對於控制你的智慧家居或訂購晚餐來說,有著巨大的不同。如果電腦在你忘記餐廳將你的餐點稱為「盤」而不是「套餐」,或者你要求「涼拌捲心菜」而不是「切碎的捲心菜」時就卡住並要求澄清,那麼它就和你過去十年來用來設定計時器和播放音樂的助理一樣沒有用。

話雖如此,看著 Gemini 在 Uber Eats 上點擊和滾動,有一件事非常明顯:如果你要為 AI 設計一個應用程式,它看起來不會像我們現在擁有的應用程式。你知道,為人類設計的應用程式。AI 助理不會被頁面中間的大幅廣告誘惑去節省 30% 的訂單費用。一道菜誘人的、擺設精美的照片,並不會比一張品質低劣的照片更有說服力。你會給它一個資料庫,而不是一堆需要篩選的雜亂資訊——這是業界正在透過模型上下文協議(MCP)努力的方向。

一個 AI 模型透過以人為中心的介面進行推理,感覺是訂購披薩最不切實際且脆弱的方式。它偶爾會遇到障礙,而且它並不擅長告訴你它為什麼無法完成某事。這個版本的任務自動化感覺像是應用程式開發人員採用更強健的方法(MCP 或 Android 的應用程式功能)之前的權宜之計。Google Android 負責人 Sameer Samat 最近告訴我,Gemini 在沒有其他兩種方法的情況下採用了推理方法。也許這個版本的任務自動化是我們對可能性的預覽,或者是一種促使開發人員採用其他方法的方式。無論如何,這感覺像是邁向使用我們行動助理新方式的一個顯著的第一步——雖然笨拙、緩慢,但非常有前途。