duckduckgo

3熱度

2回答

阻止從搜索引擎網站 - DuckDuckGo

我有一個開發網站https://text-domain.com。 （不是真實網站） 當我轉到https://duckduckgo.com並搜索text-domain.com時，它確實會返回結果。 有什麼我試過到目前爲止： 創建robots.txt文件，下面的代碼（把在我的根目錄，即在text-domain.com/robots.txt）： User-agent: * Disallow:/ 然後

web-crawler robots.txt robot duckduckgo 2013-08-06

---