SharePoint 2013使用查詢字符串參數來抓取外部網站

Question

我需要索引我公司的員工手冊，該手冊位於外部網站上。此頁面需要登錄，並且支持通過查詢字符串參數進行自動登錄。

像這樣：http://manual.externalprovider.com?token=xxxxxxxxx

當我的內容源進入這個網址我沒有得到任何結果，並且以下警告：

項目不爬由於下列原因之一：預防爬 規則;指定的內容源跳頻/深度超出; 網址有查詢 字符串參數;未找到所需的協議處理程序預防性 機器人指令。 （此產品已被刪除，因爲它被排除由 爬網規則。）

是不可能爬網已經在啓動編輯部地址查詢字符串參數的內容？任何其他建議如何解決這個問題？

Answer 1

我認爲這是可能的，但您需要創建新的爬網規則。
轉到搜索服務應用程序 - >抓取規則 - >新抓取規則。
然後粘貼您的起始網址：http://manual.externalprovider.com/ *，然後選中「在此路徑中包含所有項目」，然後選擇「抓取複雜網址（包含問號（？）的網址）」。