screen-scraping

1熱度

1回答

我看到過一些類似的問題，但沒有一個解決方案適用於我。我試圖得到每個節點的鏈接的URL，但列表只是空值。 beer <- read_html("https://www.beeradvocate.com/lists/top/") beerLink <- beer %>% html_nodes(".hr_bottom_light a b") %>% html_attr('href') %>%

-2熱度

1回答

我需要建立OCR刮刀

我希望能夠建立OCR刮應用它能夠：自動檢測，當預定的軟件是我們的計算機上運行（軟件的例子中，我們需要報廢：網頁瀏覽器，或任何軟件窗口，如單詞，媒體播放器，簡報，遊戲軟件或其他......）。它應該能夠檢測到此窗口在用戶的屏幕中移動並按照它進行操作。有時窗口可以暫時隱藏或重疊掃描窗口：我們的掃描儀必須能夠處理這些情況，即使在這種情況下也能繼續掃描。當它檢測到一個預定的軟件正在運行時，它應該自動打

-1熱度

1回答

PHP網絡抓取HTMLDOM分頁

我刮這個網址，因爲它是我最後一年的項目，但這段代碼只報廢1頁的搜索查詢我希望分頁（如1,2,3,4,5）最後請幫助我已經實現了一個使用CURL獲取數據的數據抓取腳本。但是，抓取記錄只有一個頁面，但我想要所有的數據，因爲在那個頁面分頁。 <form action="" method="post" class="form-horizontal" id="home-search"> <input

0熱度

1回答

需要python程序的幫助。如何從HTML中搜索和保存ID

目前我正在嘗試編寫一個程序，該程序將在html本地文件中搜索標籤和該標籤前面的字符（直到空格或輸入），但是我不'我知道怎麼做，我編寫了一些代碼，但它不工作，它只列出了html上的所有文本，而不是查找PA和字符。這裏是我到目前爲止的代碼： from bs4 import BeautifulSoup import re ecj_data = open('output.html', 'r').r

-1熱度

1回答

移動應用程序的網頁抓取？

是否有任何程序/庫可用於刮取移動應用程序屏幕的內容？我們的目標是爲Instagram的「Follow」feed提供一個很好的數據結構。

0熱度

1回答

逃生用Ruby Mechinze錯誤刮

試圖刮掉SERP結果我得到以下服務器響應錯誤： /Users/*********/.rvm/gems/ruby-2.3.0/gems/mechanize-2.7.5/lib/mechanize/http/agent.rb:323:in `fetch': 503 => Net::HTTPServiceUnavailable for http://******.*****.com/sorry/inde

-1熱度

1回答

Python：爲特定內容刮表

我試圖在網站上刮掉特定表格的特定部分。 URL = https://h10145.www1.hpe.com/downloads/SoftwareReleases.aspx?ProductNumber=J9775A 在網站上，還有就是我想從，這我能做到，但是，我得到了很多的表我不需要的其他物品的刮的HTML表格。如果您查看URL，表格由多個下拉列表組成，我只需要「當前版本」列表。檢查元素給了我

-1熱度

2回答

Python：試圖爲多個（類似）網站（類似）的數據刮

我有一個代碼，從惠普網站檢索有關交換機的信息。該腳本工作得很好，並將信息輸出到CSV文件中。但是，現在我需要通過30個不同的開關循環腳本。我有一個存儲在CSV文檔中的URL列表。這裏有一些例子。 https://h10145.www1.hpe.com/downloads/SoftwareReleases.aspx?ProductNumber=J4813A https://h10145.www1

2熱度

1回答

檢查JavaScript代碼的哪一部分正在呈現特定的Html元素？

本頁內容https://detail.1688.com/offer/548835845261.html 我想刮掉圖像中突出顯示的運輸價格和運輸重量。我不知道這是如何加載到DOM。它未包含在DOM中。它甚至沒有通過AJAX調用加載。不知道發生了什麼事。初始頁面的源代碼的唯一培訓相關部分，我看到的是 data-unit-config="{"calculationUrl":"https://la

3熱度

1回答

Node.js使用chrome-remote-interface進行抓取

我一直在試圖抓取一個受Distil Networks保護的網站，，其中使用selenium（使用Python）只會失敗。我做了一些搜索，我的結論是，該網站可以通過使用某種JavaScript來檢測您是否在使用Selenium。然後我在chrome-remote-interface拿到了一個戰利品，就像我想要的東西，但後來我被卡住了。我想什麼做的是自動化以下步驟：打開Chrome實例導航到