Gemini Live 的螢幕與鏡頭分享功能上線,能講也能讀中文

Gemini Live Video 和 Screensharing 開始逐步推出給了 Gemini Advanced 用戶。

Gemini Live Video Screensharing

Google 在 MWC 時答應兩個視覺 AI 功能「Live Video」和「Screensharing」會在本月稍晚來到 Android 上,而現在看起來 Google 是說到做到了。在筆者自己的 Pixel 9 Pro 上,在啟用 Gemini Live 時,已經可以看到一個新的「分享畫面給 Live」按鍵,並且也可以透過 Gemini app 將即時的相機視角分享給 Gemini。

這裡的兩個功能,「Live Video」和「Screensharing」其實嚴格來說是一樣的意思,都是由手機將連續的影像串流給 Google Gemini,並且讓 Gemini 對其內容進行即時的回應,只是「Screensharing」分享的是手機當前的螢幕上顯示的內容,而 Live Video 則是相機鏡頭看到的東西。

在簡短的測試中,Gemini Live 可以完全用中文溝通,也完全可以「讀」懂畫面上的中文。筆者試著用 Live Video 對準使用中的滑鼠,Gemini Live 不僅正確識了它的型號,還能接續回答滑鼠有哪些顏色選擇,以及售價大約多少。而在 Screensharing 的部份,在主頁上它能看到你安裝了什麼 app,也能就你目前正在瀏覽的網頁回答問題,甚至連「這個網頁用的是什麼字型」都沒有問題。比較有趣的是,在分享螢幕時如果開啟相機 app 的話,就實質上與使用 Live Video 沒有什麼區別,Gemini Live 一樣可以看到並且正確回答畫面上內容的相關問題。

在使用時,Gemini Live(語音)和 Screensharing / Live Video 是分開的,有點像在進行視訊通話時,你在語音接通之上,可以再選擇是否開啟鏡頭分享視訊。整個使用的介面也與視訊通話相當類似,當 Gemini Live 在背景聽音/錄像時,在上方的資訊列都會有相當醒目的計時器提示。

Live Video 和 Screensharing 似乎都沒有特定裝置的限制,也就是所有的 Android 手機都有機會逐步獲得,但是一月時 Google 有說會是 Pixel 和 Galaxy S25 優先,且要有 Gemini Advanced 訂閱。

緊貼最新科技資訊、網購優惠,追隨 Yahoo Tech 各大社交平台!

🎉📱 Tech Facebook:https://www.facebook.com/yahootechhk

🎉📱 Tech Instagram:https://www.instagram.com/yahootechhk/

🎉📱 Tech WhatsApp 社群:https://chat.whatsapp.com/Dg3fiiyYf3yG2mgts4Mii8

🎉📱 Tech WhatsApp 頻道:https://whatsapp.com/channel/0029Va91dmR545urVCpQwq2D

🎉📱 Tech Telegram 頻道:https://t.me/yahootechhk