如何在特定TLD上遞歸地wget？

Question

是否可以通過wget從特定TLD遞歸下載文件？

具體而言，我試圖下載Code of Massachusetts Regulations的全文。規則的實際文本存儲在多個域的多個文件中 - 所以我想從index page開始遞歸下載，但只能跟隨.gov和.us域的鏈接。

Answer 1

隨着從wget documentation on spanning hosts的幫助，我是能夠使與-H和-D標誌這項工作：

wget -r -l5 -H -D.us,.gov http://www.lawlib.state.ma.us/source/mass/cmr/index.html