google-bigquery

0熱度

1回答

插入datetime值至BigQuery我們寫了插入值到BigQuery的表，其列是DateTime類型的谷歌數據流的代碼。大部分時間邏輯運行良好。但突然我們得到無效的DateTime問題。 Exception: java.lang.RuntimeException: java.io.IOException: Insert failed: [{"errors":[{"debugInfo":"g

0熱度

1回答

如何通過BigQuery中的兩個字段進行有效分組？

我在BigQuery中有一個160GB的數據庫，代表上個月從應用發送的事件。每行都有（除其他外）日期字段，userId字段和事件字段。我需要做的是找出有多少獨特用戶在某一天使用過該應用。例如，如果用戶X在2017年9月15日前使用過應用三次，那麼當天只計算一次，但如果他在2017年9月15日，2017年9月16日和2017年9月17日期間使用了該應用，在那些日子裏每一天都只算他一次（只有一次）。

1熱度

1回答

BigQuery - 創建表格的時間戳「版本」

如何創建具有多個「代」的表格（即像使用JCL的舊大型機環境中那樣），我已經看到使用Firebase分析示例數據完成了這些工作。例如我有以下表格：mydataset.mytable（7），如界面上所列。如果我展開表的細節，我可以看到，我可以從時間戳表和預覽細節數據 BigQuery中的選擇，我怎麼能到處去模仿呢？這看起來非常有用。編輯：這是更好地解釋一張圖片！這裏是與7個快照表：這裏，看着

0熱度

1回答

排序順序table.getRows

在以下簡單示例中，'foo.csv'是一個簡單的3列表。第一列是行號。第二和第三列是字符串。我使用模式自動檢測創建表。（我也嘗試創建一個具有類似結果的特定模式表。）然後，我使用table.getRows來查詢它。返回的行不是按照它們插入的順序。我花了一段時間才弄清楚順序，因爲它不是第一列的插入順序或數字順序。排序順序是 - 第二列的長度 - 按字母順序由第二列 - 第三列的長度

0熱度

1回答

是否有某種用於bigquery的IDE？

我真的不喜歡在瀏覽器中編寫我的所有查詢，並且希望將VC集成到我們團隊的流程中。

1熱度

1回答

Apache Beam窗口和分片BigQuery輸出表格

我的用例很簡單：從Pub/Sub訂閱中讀取事件日誌，解析它們並保存到BigQuery中。由於事件數量預計會顯着增加，我使用無限數據源，因此我決定在BigQuery中配置分片：根據事件數據的時間戳將事件存儲到日常表格中（Beam文檔中稱爲「事件時間」），。我的問題是我需要配置窗口在我的情況下，或者我可以保留隱式使用全局窗口的默認配置？我問的原因是因爲我發現大部分BigQuery分片的例子都假設

0熱度

1回答

BigQuery - 窗口化股票分類

我（想）我有一個有趣的窗口場景，與網站股票可用性跟蹤有關，通過標準SQL進行處理。這是試圖建立了基於該推，從股票的「手頭」數量爲某個特定產品事件我們有與此相關的問題3種事件類型時股票頭寸的看法： StocklevelUpdated（PUSH）：在每天晚上的午夜，我們會針對倉庫中給定產品的onHandQty可用性級別進行新的更新。如果每個產品的onHandQty數量作爲下一個交易日的新值，這基本上

0熱度

2回答

有沒有辦法在編輯報表時在Google數據工作室中暫停查詢

我在連接到BigQuery的報表中構建了google數據工作室中的條形圖，計算了具有一個維度的指標的最小值，最大值和平均值。問題在於，每次我編輯圖表以添加度量標準並更改其計算（例如，求和爲min）時，都會運行一個BigQuery查詢，這非常浪費。所以我想知道是否有一種方法可以暫停查詢，直到我完成構建/編輯圖表之前取消暫停查詢，並最終查詢最終圖表。 Thx提前

1熱度

2回答

分裂

我有一個字符串框看起來像這樣在谷歌的BigQuery： S，0,2B3,8，C2 B3 00 00 00 00 03 DE 小號，0,3FA，6，00 E0 A5 04 00 0B S，0,440,8 80 40 4E 00 A5 47 00 64 S，0,450,8，89 50 01 12 01 19 01 B3 S，0,4B0,8,80 B0 4E A5 00 43 00 64 我的目標是提取

0熱度

1回答

WITH＆UNNEST in BigQuery

我發現使用WITH塊來分解查詢中的邏輯很有幫助。我是否認爲我無法在ARRAY表達式中的嵌套字段上執行此操作？我可以分成嵌套查詢 - 這是足夠的但不是理想的。例如，這個工程： SELECT repository.url, ARRAY( SELECT action FROM ( SELECT action FROM