信息檢索以圖像形式獲取地名

Question

我開始開發一個軟件，通過旅遊景點的圖像（例如：聖彼得大教堂，鬥獸場等）我應該檢索哪個是現貨（加上相關信息）。除了圖像之外，我還將與圖像座標（嵌入爲元數據）一起使用。我知道我可以通過使用反向搜索的Google Images API來支持我，在該搜索中，我將圖像作爲輸入，並且我將以響應形式提供一大組圖像。

但是，我對你的建議要求是，現在有了所有相似的圖像，我可以使用哪種方法來檢索照片中的正確地點名稱。

，我管理的第二個方法是建立自己的數據集在我的數據庫，並盡我自己的啓發式（過濾通過他們的位置的圖像，然後幹了那事濾波之後使在結果子集表的比較）。聽到建議和意見，並提前致謝。

Answer 1

一個想法是使用圖像的標題（如果可用）作爲查詢，檢索候選列表並使用結構化知識庫來推斷位置名稱。

如果沒有與圖像相關的標題，情況就會變得非常棘手，在這種情況下，您可以使用預先訓練的卷積網的fc7圖層輸出並查詢ImageNet以檢索排序的相關列表圖片。由於這些圖像有字幕，您可以再次使用它們來獲取位置名稱。