Marqo、yolox、CLIP、OWL-ViTを用いた、ローカライゼーションとオープンボキャブラリ再ランキングによる画像検索

要点: ここでは、Marqo、yolox、CLIP、OWL-ViTを活用して画像検索を発展させ、ローカライゼーションと再ランキングを追加する方法を示します。追加のローカライゼーション次元を加えることで、検索性能を改善し、画像検索の新たなユースケースを可能にすると同時に、説明可能性も高めることができます。オープンボキャブラリの検出モデルを用いて再ランキングすると、より細かなローカライゼーションが可能になります。記事の前半では背景情報を扱い、後半には実行可能なコードが含まれています（こちらでも確認できます）。