2013-03-14 58 views
1

我們的系統每10分鐘運行一次從CS導入的BQ csv文件(〜8Mb)。但是,今天至少發生了4次錯誤:「未找到:Google Storage File ...」。我已經加倍檢查了CS上的文件並且沒有問題地下載它。我嘗試(重新)啓動BQ導入(job_610b149c0d9041b7a3145ee245b80653),再次找到「未找到...」。所有其他進口(數百個)都很好。BigQuery imports - 未找到CS文件

我們使用GAE(java)在CS上分級csv文件,然後觸發導入作業(GAE - > CS - > BQ)。一般來說,系統工作正常,但不是很可靠。所以,我正在努力彌補缺失(數據缺失)或者幾乎每天都有重複。是否有任何其他方式(良好做法)將「持續流量」數據導入BQ?流?

一旦我們在BQ表中有數據,事情變得更容易。 BigQuery是非常棒的產品!謝謝,莎莎

+0

今天我有同樣的問題。我們從GAE下載並處理文件並將其存儲到雲存儲中。然後,我們啓動BQ工作,爲我們使用這些文件。我們隨機地得到「文件未找到」和作業失敗的錯誤。 – someone1 2013-03-14 12:36:33

+0

現在應該修復。 – 2013-03-14 18:31:23

回答

0

這應該是固定的。有一個配置問題導致一些雲存儲文件在昨晚5點到今天上午10點15分(PST)之間無法訪問。如果您有任何其他問題,請ping此線程。

+0

現在有效。謝謝! – Sasa 2013-03-14 20:17:35

+0

導入作業(job_c4d1a16f62144cdbabc703fc902c24d9)報告以下錯誤: 「列數過多:預計有28列,但獲得了29列。有關其他幫助:http://goo.gl/RWuPQ」... 當我幾個小時後重複導入相同的文件(未修改)一切正常(job_05f6217c70d44a10b183e026733ddfc0) – Sasa 2013-03-15 07:40:36