Robot.txt表示被阻止但不阻塞任何東西？

Question

所以我想在我的網站上獲得廣告。它正在審查一段時間，所以我正在做一些挖掘，也許有些東西阻止漫遊器爬行。我今天發現了這個，告訴我它是否意味着什麼。

第一：我在Google搜索控制檯上提取並呈現我的網站。

我點擊上圖中右邊的鏈接robots.txt的，它表明這一點：

所以後來我做了一個機器人抓取所有谷歌機器人，結果被允許在我的機器人文件。 活動文件：

在我的網站的文件管理器中，上面的圖片是我實際的robots.txt文件。那麼，由於我的漫遊器文件阻止了第二階段的驗證，我的廣告無法驗證嗎？

Answer 1

您的robots.txt只能阻止來自主機的網址。

來自Google Search Console的消息是關於外部網址的。該外部主機的robots.txt阻止對相關網址的抓取。

你可以對此做任何事情（除了自己託管外部腳本，但在所有情況下這當然是不可能的）。