google-cloud-bigtable

6熱度

1回答

我們使用情況，我們想存儲大量的谷歌的Bigtable數據長期：產品開發期間進行性能優化用於演示我們需要存儲數據，但我們並不真正需要的是「在線」的所有時間。目前的成本瓶頸似乎是在這些情況下長時間閒置的節點的成本。在產品開發過程中如何使用Google Bigtable？我知道開發模式（和模擬器），它們適用於某些使用情況，但我們仍然需要其他用例的生產環境。真的，最理想的是能夠切換「關閉」Bi

1熱度

1回答

Bigtable行鍵 - 僅以日期開始？

Bigtable文檔警告不要單調增加行鍵，如時間戳。怎麼樣這樣的情況：有一個日期行鍵啓動，並用隨機GUID（前2017-01-01#563d7104-f976-40a2-b0d5-a1b6083c73f4）在24小時內結束，寫入和讀取具有相同的日期，在大多數情況下這是否會導致問題，或者一旦BigClick意識到大多數讀寫操作在24小時內的同一日期，它會在整個當前日期內有效地拆分節點？我需

0熱度

1回答

Bigtable中的行時間戳 - 它們何時更新？

的TimestampRangeFilter從Bigtable's Go API的定義是： TimestampRangeFilter返回匹配其時間戳給定的時間範圍內的任何行的過濾器。是行時間戳更新時：任何列的值寫入/該行內的改變？行鍵是否更新？該行是否已創建？任何其他情況？

0熱度

1回答

基於動態過濾器的bigtable批量更新

我正在尋找一種方式來掃描巨大的Google BigTable，並根據事件動態組成過濾器，並對大量行進行批量更新/刪除。目前，我正在嘗試將BigTable與基於Java的Dataflow（用於密集型無服務器計算能力）相結合。我達到了可以根據事件使用動態過濾器組合「掃描」對象的程度，但我仍然無法找到將CloudBigtableIO.read（）的結果流式傳輸到後續數據流管道的方法。欣賞任何建議。

0熱度

1回答

Bigtable Google Happybase Python KeyError試圖做`counter_inc`

我不知道爲什麼，但counter_inc方法不工作，沒有模擬器，指向一個開發真實的實例。段： from google.cloud import bigtable from google.cloud import happybase client = bigtable.Client(project='robbie-ai', admin=True) instance = client.ins

0熱度

1回答

雲數據流窗口觸發器覆蓋從關閉窗口中的值

我在寫一個從Pub/Sub讀取的Dataflow（Beam SDK 2.0.0），計算窗口中的元素，然後將計數作爲時間序列存儲在BigTable中。窗戶固定時間爲1分鐘。我的意圖是使用觸發器每秒更新當前窗口的值，以獲得當前時間窗口的實時更新。但這似乎並不奏效。該值每秒都會正確更新，但一旦Dataflow在下一分鐘開始工作時，第一個更新爲零。所以基本上只有我的最後一個值是正確的，其餘的都是零。

2熱度

1回答

與Google Cloud BigTable獲取編譯錯誤

vendor/google.golang.org/grpc/transport/http_util.go：481：f.fr.SetReuseFrames undefined（type * http2.Framer沒有字段或方法SetReuseFrames）它似乎是從golang.org/x/net/http2到來。希望我能與谷歌直接拿這件事，但是這不是在Github。任何其他人遇到此問題？

0熱度

2回答

單元測試雲Bigtable數據訪問

如何獲得一個模擬Bigtable與一些數據用於單元測試（ScalaTest與MockitoSugar）？我在Hbase java API上創建了一個API，數據訪問包括使用自定義邏輯形成行鍵，然後在Get或Scan方法中使用。所以它不足以擁有一個Result mock對象，相反我需要一個Table實例和一些行。我怎樣才能實現它？

0熱度

1回答

NotSerializableException試圖用JsonCredentials從Apache的梁查詢的BigTable

我試圖使用連接到谷歌的BigTable： BigtableOptions.Builder bigTableOptions = new BigtableOptions.Builder() .setProjectId(options.getProjectId()) .setInstanceId(options.getInstanceId()) .setCred

0熱度

2回答

SBT驗證由多個protobuf 2/3依賴關係造成的錯誤（儘管有陰影）

我正在使用Scio/Bigtable/HBase與下面的這個示例項目驗證錯誤。依賴關係樹需要protobuf版本（2.5,2.6.1,3.0,3.1），並且似乎默認爲3.2。我使用了sbt-assembly的陰影部分，不確定我是否正確。我build.sbt： name := "scalalab" version := "1.0" scalaVersion := "2.11.8" li