如何查看我網站上的所有可公開訪問的鏈接/頁面的列表？

Question

我想查看我網站上所有公開訪問鏈接的列表，以便知道用戶有權訪問哪些頁面。是否有網站或應用程序可以抓取我的網站並顯示此類信息？

Answer 1

你可以嘗試運行遞歸wget（通過傳遞-r選項）：

wget -r http://www.example.com 

Answer 2

如果您的網站已經在網上，你可以很容易地得到使用Google Webmaster Tools這些信息。您也可以在Google上查找site:http://www.yoursite.com以獲取已爬網頁面的列表。