JSP/Struts /會話控制的Web應用程序中的爬行器

Question

我得到了一個struts web應用程序（運行在tomcat 6上），除了第一個調用位於WEB-INF中的開始動作的所有文件，並且您總是需要一個Session來使用否則你將被重定向到開始動作並重新啓動頁面。

應用程序的主要功能是從數據庫提供產品的搜索。抓取工具如何在我的應用中導航？它會觸發可能導致錯誤頁面的搜索嗎？或者它只能跟隨沒有嵌入到表單中的鏈接（struts使得幾乎所有的表單都可以使用，因此只有一些鏈接並且主要是onclick重定向和表單動作）

如何提供可以被索引到的有用信息這樣的爬行器？

感謝諮詢:)

Answer 1

聽起來像是你將最好關閉讀了一些搜索引擎優化指南：http://www.google.com.au/search?q=seo+guidelines&ie=utf-8&oe=utf-8&aq=t&rls=org.mozilla:en-GB:official&client=firefox-a&safe=high，

要回答你的questsions：

爬行一般會瀏覽到您的應用程序從外部網站上的鏈接，或將您的網站提交給搜索引擎後。

抓取工具不會填寫輸入內容並提交表單，它會按照您的頁面之間的超鏈接。

如果您希望檢索器爲您的搜索結果編制索引（無法真正瞭解您爲什麼要這樣做），那麼您可以在已編入索引的某個頁面上放置常用搜索的鏈接。

你應該確保你的產品頁面是搜索引擎優化友好的，並且被索引而不是你的搜索結果。