data-collection

-3熱度

1回答

我正在嘗試從知識網上的75,000篇文章中收集數據。所有數據可以在每篇文章的網頁上查看。作爲編程的絕對初學者，我不確定如何做到這一點，而不是手動。有沒有我可以在R或任何其他平臺上使用的代碼直接從網頁提取數據，而無需下載所有文章？

1熱度

1回答

Py 2.7 arch：如何持久化多個服務器的HTTP/S並且不會收集多次發送的數據？

這是一個很複雜的問題，所以我會盡我所能在我的解釋中表達清楚，不要給太多不必要的細節。去年我開發了一個python腳本。它抓取基本的系統數據並將其發送到HTTP/S服務器，如果用戶選擇這種服務器，它可以發回命令。去年這是一個很大的實驗，看看哪些是有效的，哪些沒有。測試公司內部的不同需求等等。但現在我對我們需要的東西有非常深刻的瞭解。所以我開始了我的第二版旅程。這個新版本的目的是保持功能，同時減少

1熱度

1回答

帶DBRef字段的MongoDB分片密鑰？

我有一個包含DBRefs到根文檔的集合。我有數以萬計的文檔鏈接到我的數據收集中的單個根文檔。這就是爲什麼我選擇不嵌套根文檔的數據。 Data Collection: _id : Auto-Created ID ts : TimeStamp field_1 : Whatever ... field_n : Whatever root :

3熱度

1回答

調試和跟蹤Hotjar數據

最近，我們公司開始使用Hotjar來收集使用數據。由於這是我第一次使用該服務，因此我犯了一些錯誤，這使我尋找一種調試方法。在閱讀官方文檔，論壇，stackoverflow後，我什麼也沒找到。我必須做什麼/修改以啓用Hotjar中的調試？

0熱度

1回答

從需要cookie的網站收集Python文章

我正試圖從infoweb.newsbank.com的數據庫中收集關於我在大學所做研究的文章。到目前爲止，這是我的代碼： from bs4 import BeautifulSoup import requests import urllib from requests import session import http.cookiejar mainLink = "http://inf

5熱度

2回答

哪裏得到數據來比較緩存算法

我不想比較真實數據上的緩存算法，比如LRU，SLRU，LFU等。這就是爲什麼我需要一些方法來生成真實的數據來比較緩存算法或從某些應用程序獲取這些數據。

2熱度

2回答

Android - Facebook SDK AppEventsLogger logEvent不起作用

谷歌搜索沒有幫助我。我試圖通過Facebook app events 推在Facebook上的儀表板數據我的代碼是： AppEventsLogger logger = AppEventsLogger.newLogger(this); logger.activateApp(this, Utility.FACEBOOK_ID); logger.logEvent(AppEventsC

0熱度

1回答

Appcelerator的鈦的TableView花費很長的時間來加載

我有一個控制器，其中我有一個這樣的表視圖： <TableView id="reservedScroll" dataCollection="queue" dataTransform="transformFunction" dataFilter="reservedByDate" layout="vertical" > (some rows) </TableView> 創建這個控制器6對

0熱度

1回答

Url沒有在網頁中返回正確的html（對於我的Java爬蟲）

我想從網頁上下載一些圖像，爲此我正在編寫爬網程序。我測試了這個頁面的幾個抓取工具，但沒有工作，因爲我想。第一步，我收集了770+相機型號（parent_url）的鏈接，然後我想收集每個鏈接中的圖像（child_urls）。但是，該頁面的組織方式使得child_urls返回與parent_url相同的html。這裏是我的代碼，以收集相機鏈接： public List<String> html_c

-1熱度

1回答

如何從雲端全天候運行代碼

我的目的是在幾個月內全天候運行python代碼，以通過API調用收集數據，並在滿足特定條件時提醒我。我該如何做到這一點，而不是讓我的筆記本電腦24/7全天候運行代碼？在「雲」中有沒有辦法做到這一點？最好是免費的，但會考慮支付。簡單也是一個優點。