年幼兒童的父母常為發展里程碑感到焦慮,從嬰兒期到成年期,孩子學會說話或走路所需的月數常被用作健康指標,或判斷是否需要進一步檢查。父母為孩子的第一步歡欣鼓舞,隨著孩子能快速走出戶外,而非在安全的室內緩慢爬行,安全措施與防護觀念也隨之改變。
生成式AI在2025年12月至2026年1月間進入幼兒期,隨著多家廠商推出無需編碼的工具,以及GitHub上開源個人代理OpenClaw的問世,生成式AI技術如同嬰兒破繭而出,迅速奔跑,但治理原則卻未能及時跟上。
過去,治理多聚焦於模型輸出風險,且在做出重要決策前由人類介入,例如貸款審核或求職申請。重點在於模型行為,包括漂移、對齊、資料外洩及中毒等問題。互動節奏由人類透過聊天機器人形式的提示控制,雙方來回交流頻繁。
如今,自主代理在複雜工作流程中運作,應用AI的願景與效益要求大幅減少人類介入。目標是以機器速度自動化具明確架構與決策規則的手動任務,從責任角度看,機器操作流程與人類操作流程的企業風險不應降低。CX Today簡潔總結:「AI執行工作,人類承擔風險」,加州法律(AB 316)於2026年1月1日生效,取消了「AI做的,我沒批准」的藉口,類似於成年人對孩子行為負責的概念。
挑戰在於,若未在整個工作流程中內建符合不同風險與責任層級的運營治理代碼,自主AI代理的效益將被抵銷。過去治理較為靜態,配合聊天機器人典型的互動節奏,但自主AI設計上移除許多決策中的人類,影響治理方式。
就像把遙控艾布蘭主戰坦克或武裝無人機的遊戲機交給三歲孩童,讓一個機率系統在無即時護欄下操作關鍵企業資料,風險極大。例如,跨多個企業系統整合並串聯行動的代理,可能超出單一人類用戶的權限範圍。要成功推進,治理必須從委員會制定政策轉向從一開始就將運營代碼內建於工作流程中。
有個幽默的迷因形容幼兒玩具行為,起初聲稱「這玩具是我的」,最後卻是「玩具壞了,肯定是你的」。例如,OpenClaw提供的使用體驗接近人類助理,但安全專家發現,缺乏經驗的用戶容易因使用它而遭受攻擊,興奮感隨之消退。
數十年來,企業IT面對影子IT的現實,技術團隊必須接手並清理未經設計或安裝的資產,就像幼兒交還壞掉的玩具。自主代理的風險更大:持久的服務帳戶憑證、長期API令牌,以及對核心檔案系統的決策權限。為應對此挑戰,必須事先分配適當的IT預算與人力,持續進行中央發現、監督與修復,管理成千上萬由員工或部門創建的代理。
近期,一位熟人提到她幫客戶節省數十萬美元,因為她發現並終止了一個「殭屍專案」——一個被忽視或失敗的AI試點仍在GPU雲端實例上運行。企業內可能有數千個代理風險成為殭屍艦隊。如今,許多主管鼓勵員工使用AI,並要求他們自行建立AI優先的工作流程或助理。以OpenClaw的實用性和自上而下的指令來看,帶著自建代理進辦公室的員工數量將爆炸式成長。由於AI代理屬於公司擁有的智慧財產,當員工調動部門或離職時,這些代理可能被遺棄。必須有積極政策與治理,停用並退役與特定員工ID及權限相關的代理。
對部分主管而言,自主AI似乎是透過減少人力資本來提升營運利潤的途徑,但許多人發現以人力替代的投資報酬率並非正確角度。將AI能力引入企業,不等同於購買具預測性按時或按席計費的新軟體工具。2025年12月由Data Robot贊助的IDC調查顯示,96%部署生成式AI的組織及92%實施自主AI的組織表示成本高於預期。
調查區分治理與投資報酬率,但隨著AI系統在大型企業擴展,財務與責任治理應從一開始就內建於工作流程。企業級治理部分源自預測與遵守預算分配。不同於軟體按席計費及維護費用,AI使用屬於消耗型,隨工作流程擴展而增加:用戶越多,代幣或運算時間越多,費用越高。可想像成一個未結帳的帳單,或是幼兒電子遊戲裝置上解鎖的線上購物車按鈕。
雲端財務運營(FinOps)過去較為確定,但建立於生成式AI的生成式及自主AI系統是機率性的。一些AI創業者發現,單一代理的代幣成本每次會話可高達10萬美元。若未從一開始設置護欄,長時間無監督運行的複雜自主代理鏈,輕易超出聘請初級開發者的預算。
自主智能代理AI的承諾是加速業務運作、產品推出、客戶體驗及留存。以機器速度做出決策,且關鍵功能中無人類介入,將大幅改變治理格局。雖然主動權限、發現、稽核、修復及財務運營優化等原則相同,但執行方式必須調整,以跟上自主智能代理AI的步伐。