Ruby on Rails-滾動後如何抓取頁面上加載的數據？

Question

我試圖通過刮取以下鏈接中的所有產品的標題和價格。 https://homeshopping.pk/categories/Mobile-Phones-Price-Pakistan

我能夠獲得的產品名稱和價格，但問題是，我們向下滾動頁面和頁面的URL在加入新產品是不是changed.So我不能刮的產品信息是在頁面向下滾動後加載。

Answer 1

檢查在加載新數據部分時調用的ajax請求。 他們使用分頁（page=2）：

https://homeshopping.pk/categories/Mobile-Phones-Price-Pakistan?page=2&AjaxRequest=1&undefined 

通過增加page PARAM只是想迭代throught分頁。