Geminiアプリ、リアルタイムで視覚的支援を提供するライブビュー機能を導入

Googleは、Geminiアプリに新しいライブビュー機能を追加し、iOSおよびAndroidユーザーが自分の周囲をライブストリーミングして、見ている物についてフィードバックを受け取ることができるようになったことを発表しました。この機能は本日から展開が始まっています。

デモでは、Geminiがユーザーが見ている物体を識別し、誤った仮定を修正し、質問に答えて文脈を提供する様子が紹介されました。Geminiのライブビューは、物体をリアルタイムで識別したり、DIYやホーム改善プロジェクトの支援、スペースの整理、買い物のアシストなど、さまざまな支援が可能です。

また、iPhoneやiPadの画面をGeminiに共有して、オンラインで見ているものに対するフィードバックを受けることもできます。

Geminiのライブビュー機能は、視覚障害のある人々や視力が低い人々にとって有益で、周囲の音声フィードバックを提供することができます。この機能は、Googleが昨年のI/Oでプレビューしたプロジェクトアストラに基づいており、以前はPixelデバイスに展開されていました。