GoogleフォトにGemini搭載の対話型検索「Ask Photos」が米国で提供開始

Googleは5月14日の開発者会議「Google I/O」で、実験的な機能として「Ask Photos」を発表しました。このたび、Geminiを活用した対話型検索機能が、米国のGoogleフォトユーザーに向けて正式に展開されました。

自然な言葉で写真や動画を検索できる

Ask Photosでは、従来のような単純なキーワード入力ではなく、あたかも検索ボックスと会話しているかのように、自然で説明的な検索クエリを使って写真・画像・動画を見つけることができます。クエリが具体的で詳細であるほど、より的確で関連性の高い検索結果が得られる仕組みです。

さらに、検索結果を「関連度」または「日付」で並べ替える機能も追加され、目的のコンテンツへより素早くアクセスできるようになりました。

画像内のテキストや出来事まで理解するGeminiのマルチモーダル能力

Googleによると、Ask Photosは「テーマ付き誕生日パーティー」「ブライダルシャワー」「卒業式」といった概念を理解できるほか、画像内に写ったテキストを読み取ったり、写真に映る出来事や状況を把握したりすることも可能です。ユーザーの個人的な生活に関する情報も解析し、正確な検索結果を提供します。

実際には、「去年の誕生日はどこで過ごした?」「あのクーポンの有効期限はいつまでだっけ?」「ギリシャのABCホテルで昼食に何を食べたっけ?」といった会話のような質問が可能です。Ask PhotosはGeminiのマルチモーダル機能を活用して検索内容を処理し、クエリに合致する関連写真を返します。結果ページには、検索内容に答えるテキスト形式の回答も表示されます。

うまく見つからないときは追加情報を入力

もしAsk Photosがすぐに関連する写真や動画を見つけられなかった場合でも、ユーザーが詳細情報を追加で入力することで、検索意図をより正確に理解させることができます。

今後は多言語・多地域へ拡大予定

要するに、GeminiのおかげでGoogleフォトの検索機能はチャットボットとしても動作するようになったのです。人、場所、ペット、物など、あらゆる写真や動画を探すのに役立つこの機能は、現在米国在住の全ユーザー(Android・iOS両方)向けに英語で提供されています。Googleは今後数週間のうちに、より多くの言語と地域への展開を予定しており、日本語対応にも期待が高まります。