【教學】如何體驗 Google 的 Project Astra 和 Stream Realtime 功能

Google 宣佈了一系列更新,包括 Gemini 2.0 Flash 模型、Deep Research 等。此外,這家搜索巨頭還預覽了即將推出的 AI 代理,如 Project Mariner、Project Astra 和 Jules。Google 表示正在改進 Project Astra,其功能將整合到 Gemini 應用中。

與此同時,Google 在 Google AI Studio 安靜地推出了 “Stream Realtime”,該功能與 Project Astra 非常相似。這一功能旨在讓開發者測試 API,但一般用戶也可以輕鬆且免費地使用。用戶可以使用相機展示周圍環境,並與 Gemini 2.0 進行實時對話。最棒的是,您可以分享筆記本電腦的屏幕並使用實時語音進行互動。

延遲已顯著減少,實際上感覺就像與 Gemini 2.0 進行實時對話。您可以使用智能手機的相機或筆記本電腦的網絡攝像頭向 Gemini 展示您正在查看的內容。您還可以在筆記本電腦上分享您的屏幕。以下是如何在 Google AI Studio 嘗試類似 Project Astra 的早期預覽。

  • 請在您的手機或筆記本電腦/桌面瀏覽器中啟動 aistudio.google.com/live。
  • 現在,使用您的 Google 帳戶登錄。Google AI Studio 對所有人免費。
  • 之後,點擊 “Show Gemini” 並允許使用您的實時相機和麥克風。
  • 現在,您可以展示周圍環境並與 Gemini 2.0 實時對話。我使用我的智能手機進行測試,它正確識別了我的 Raspberry Pi 板。
  • 接下來,在我的筆記本電腦上,我與 Gemini 2.0 分享了我的屏幕,效果相當不錯。它分析了我的屏幕並在尋找筆記本電腦時給了我幾個建議,這真的很酷。

對於實時編碼幫助,屏幕共享功能可能會派上用場。ChatGPT 已經可以在 macOS 上查看您的屏幕,但僅限於少數編碼應用。OpenAI 之前宣佈 Live Camera 將會到來,但目前尚未有官方更新。也許在持續進行的 “12 days of OpenAI” 宣佈中,該公司可能會在 ChatGPT 上推出 Live Camera。

順便提一下,Microsoft 也在測試 Copilot Vision,該功能可以在您瀏覽網頁時查看您的屏幕,但同樣僅限於少數經批准的網站,並且僅對早期訪問用戶可用。

通過 Stream Realtime,Google 展示了一些非常接近 Project Astra 的功能。當然,改進的 Project Astra 可以利用實時 Google Maps、Google Lens 和 Google Search 數據,以獲得更無縫的體驗,但目前尚不可用。我認為即使沒有實時網絡訪問,Stream Realtime 也能很好地展示 Project Astra。誰知道 Stream Realtime 可能在幕後就是 Project Astra。

日本電話卡推介 / 台灣電話卡推介

更多儲值卡評測請即睇:SIM Card 大全
https://www.techritual.com/category/sim-card-review/