写真の拡張ビジュアル検索について
拡張ビジュアル検索を使用すると、写真ライブラリで、写真やビデオに写るランドマークを検索することができます。
拡張ビジュアル検索を使用する
iOS 18、iPadOS 18、macOS Sequoia以降では、写真ライブラリの拡張ビジュアル検索を使用して、写真やビデオに写るランドマークや興味のある場所を検索できるようになりました。これにより、写真やビデオに位置情報が保存されていなくても、探しているものを簡単に見つけることができます。
写真アプリまたはSpotlightでゴールデンゲートブリッジや凱旋門などのランドマークを検索するだけで、目的のランドマークが写っている写真やビデオがすべて検索結果に表示されます。
拡張ビジュアル検索でプライバシーが保護される仕組み
拡張ビジュアル検索は、ユーザのプライバシーを保護するため、オンデバイス処理とほかのプライバシー保護技術を組み合わせてゼロから構築されています。そのため、拡張ビジュアル検索の動作において、写真やビデオがAppleに送信されたり、Appleが該当する写真やビデオの情報を把握したりすることはありません。
まず、デバイス上の機械学習モデルによって、ライブラリ内の写真やビデオにランドマークや興味のある場所が含まれている可能性があるかどうかが判断されます。次に、該当する写真においてランドマークが含まれている可能性のある部分が、忠実度の低い数学的表現で抽出されます。これを埋め込みと呼びます。画像データではなくこの埋め込みが暗号化されてAppleサーバに送信され、そこでランドマークや場所のグローバルリスト(大きすぎてユーザのデバイスに収まりきらない)と照合されます。
復号化キーはユーザのデバイスに残るため、Appleサーバでは暗号化された埋め込みや検索結果を復号化できません。
暗号化された埋め込みは、検索結果を返すためだけに使用され、Appleのグローバルリストを補足するなど、その他の目的で使用されることはありません。検索結果がデバイスに返された後、デバイスからの検索リクエスト(暗号化された埋め込みを含む)がAppleによって保存されることはありません。
デバイスからの検索リクエスト(暗号化された埋め込みを含む)は、ユーザのApple Accountと紐付けられないため、アカウントやデバイスに関連付けることはできません。
拡張ビジュアル検索では、以下のプライバシー保護技術により、写真に写っている場所とグローバルリストのランドマークを照合しつつプライバシーを保護します。
準同型暗号 — 暗号化された埋め込みを復号化することなく、検索を実行できるようにする技術です。Appleサーバは、暗号化された埋め込みデータを受信し、これをグローバルリストのランドマークと照合して、暗号化された検索結果を返します。ユーザのデバイスで、当該デバイスにのみ保存されている復号化キーによりそれらの検索結果が復号化され、表示されます。Appleサーバでは、復号化キーにアクセスできないため、埋め込みデータや検索結果を復号化することはできません。
差分プライバシー — ノイズや偽の情報を追加してお使いのデバイスからの検索リクエスト(暗号化された埋め込みを含む)を隠す手法です。これにより、あるデバイスから送信されたリクエストや暗号化された埋め込みについて、情報を把握することが非常に難しくなります。拡張ビジュアル検索では、デバイスからのリクエストと一緒に偽のリクエストが送信されるため、サーバはどちらが本物のリクエストかを識別できません。
OHTTPリレー — お使いのデバイスからの検索リクエスト(暗号化された埋め込みを含む)がAppleサーバに到達する前にユーザのIPアドレスを隠す、サードパーティの匿名化ネットワークです。これにより、リクエストがユーザやユーザのデバイスに紐づけられたり、ユーザのデバイスから送信された過去のリクエストに紐づけられたりするのを防ぐことができます。
拡張ビジュアル検索のオン/オフを切り替える
この設定はいつでも管理できます。
iPhoneやiPadの場合
設定アプリ>「アプリ」>「写真」の順に開きます。
下にスクロールして、「拡張ビジュアル検索」をオンまたはオフにします。
Macの場合
写真アプリを開きます。
メニューバーから、「写真」>「設定」>「一般」の順に選択します。
「拡張ビジュアル検索」を選択または選択解除します。