如何檢查整個網站以查看其中的任何頁面是否鏈接到特定的URL？

我們的網站受到了一個問題的困擾，因爲類似諾頓網站的網頁保護設施頁面在某些瀏覽器中告訴某些訪問者我們的網站具有潛在的風險，因爲我們鏈接到某個http://something.abnormal.com/（僅限示例URL）。如何檢查整個網站以查看其中的任何頁面是否鏈接到特定的URL？

我一直試圖逐頁瀏覽網頁，無濟於事。

我的問題，你知道任何網站，可以「抓取」到我們的網站的網頁，然後檢查是否有任何文字，圖像，無論在哪裏鏈接到異常的URL，一直在竊聽。

非常感謝！ :)

2011-09-09 jkregala

您可以嘗試使用Google搜索「http://something.abnormal.com/ + mysite.com」 –

你想要的是一個'蜘蛛'應用程序。我在'Burp Suite'中使用蜘蛛，但有一系列免費，便宜和昂貴的蜘蛛。

約打嗝的好處是，你可以得到它的蜘蛛整個網站，然後看看在任何你想要的每一頁，無論是東西來匹配一個正則表達式或動態內容等

2011-09-09 08:05:30

如果你的網站包括靜態內容頁面少量的，我會用wget下載所有網頁（忽略圖像）

wget -r -np -R gif,jpg,png http://www.example.com

，然後使用對結果可疑URL文本搜索。如果你的網站更復雜，httrack可能更容易配置爲純文本下載。

2013-05-12 22:35:48 ojdo

回答