任何人（包括Google）都可以獲取包含我的網站的服務器上的文件列表嗎？

Question

1. 如果我有一個web服務器上的html文件，沒有任何鏈接，並且沒有任何鏈接指向它任何地方，谷歌能夠看到它嗎？谷歌能夠推廣它嗎？

Answer 1

簡短回答：不，可能。

較長的回答：大多數情況下，像Google這樣的搜索引擎通過跟蹤鏈接工作，而不是猜測服務器上的URL。只要HTML文件不是像「index」或「home」這樣的知名名稱，或者是另一個用作Web服務器的默認索引頁的值，那麼它就不太可能包含在搜索索引中。 （免責聲明：我不爲谷歌工作，搜索算法是專有的，所以他們可能實際上有一些URL猜測）

但是，如果你依靠這種行爲來保護你不想要的東西直到你準備好推廣它，你會有一段糟糕的時光。歷史上充斥着一些公司的例子，這些公司決定「隱藏」一個它尚未準備好推廣的網址，只能被某人在其瀏覽器中編輯URL字符串來挫敗隱藏內容。

Answer 2

通常，Google和其他搜索引擎會通過跟蹤從一個網頁到另一個網頁的鏈接來查找新頁面，以添加到其索引中。

一些搜索引擎，包括Bing和谷歌，也允許網站管理員直接提交網址，這意味着即使沒有指向「外部世界」的鏈接，您的網站也可能被編入索引。 （這些鏈接在交易中被稱爲「入站鏈接」。）

Answer 3

一般來說，如果你真的還沒有鏈接到它，答案是否定的。 HTTP沒有獲取目錄列表的命令。 （好吧，我不討論通過Chrome瀏覽器進行谷歌間諜的可能性）。我不想要谷歌看到它，你可以把它放到一個聲明爲禁止的目錄中robots.txt 100％確定，並確保你的服務器設置爲不提供目錄索引。如果您要想要谷歌來掃描它，獲得它的唯一方法是發佈一個鏈接到它的某個地方。