網頁抓取：按javascript按鈕

Question

我想刮一個網頁，並接收我需要按下按鈕的數據。這是該按鈕的源代碼：

「a class =」press-me_btn「href =」javascript：void（NewPage ['DemoPage'] .startDemo（））;「id =」js_press-me_btn「> PRESS ME

是否有可能「新聞」按鈕莫名其妙地不使用瀏覽器嗎？或者通過使用wget與--post數據參數，或者一個小的Python和Ruby，Perl等應用？

任何想法表示讚賞！

Answer 1

在這種情況下，這些不是一個按鈕，它是一個anchor element，我認爲你需要運行js代碼，即在href屬性中：

javascript:void(NewPage['DemoPage'].startDemo()); 

Answer 2

我們使用iMacros爲web scraping，它可以按各種按鈕。它適用於Perl，Ruby等。

如果在Linux上，請嘗試free/open source iMacros Firefox addon。