根據在 X 平台上的一則預告貼文，微軟的 Copilot AI 助手將開始觀察用戶在線上所查看的內容。這家科技巨頭在一個月前對 Copilot 進行了重大改造，其中包括一個名為 Copilot Vision 的功能，該功能針對報名參加 Copilot Labs 實驗中心的特定群體而設，但現在將使 AI 能夠查看用戶屏幕上的所有內容成為每個人的選項。
在過去的一個月中收集反饋後，Copilot Vision 顯然已經準備好進行全面推出，包括整合到微軟的 Edge 瀏覽器中。一旦可用，用戶只需單擊瀏覽器上的屏幕圖標即可啟用該工具。Copilot Vision 本質上是在用戶查看的內容上放置一個 AI 眼睛，從網站到文件皆可。它甚至可以閱讀文本，無論是輸入的還是手寫的，並顯示在屏幕上。該 AI 將觀察並回應屏幕上的內容，以回答用戶的任何問題並提供下一步的建議。
與其從一個網站上研究未來的旅行選項，Copilot Vision 將直接提供詳細信息和建議，並回答用戶的問題，而無需進行新的搜索。如果用戶在網上看到一個食譜，但想要進行更改，Copilot Vision 可以告訴用戶一些替代選項或提供烹飪技巧，而無需離開頁面或調出聊天機器人。
視覺與圖像這種方法使 Copilot Vision 與典型的聊天機器人不同，因為它不需要用戶解釋導致請求幫助或建議的情況。它可以與用戶看到相同的內容。這是微軟試圖使 Copilot 成為一個有用助手的一部分，讓人們在需要建議時隨時求助。
如果用戶擔心隱私問題，微軟已表示 Copilot Vision 數據不會從先前的會話中轉移。微軟在會話結束後不會保存或使用用戶的瀏覽數據。起初，它也不會在每個網站上運行。Copilot Vision 只會查看一些符合微軟安全標準的熱門網站。隨著 ChatGPT 和 Claude 都進入 Copilot 的領域，並推出桌面應用程序，這類功能可能是微軟在更廣泛的 AI 助手市場中競爭的關鍵。
