google-cloud-bigtable

0熱度

1回答

假設我們有一個Bigtable的結構如下：表1：CF1 [「COL1」，「COL2」]，CF 2 [「COLX」，「科利」] 從HBase的查詢客戶端API： Get getT = new Get(Bytes.toBytes(rowKey)); getT.addColumn(byteArray_cf1, byteArray_col1); Result rt = table.get(getT)

1熱度

2回答

爲什麼增量在Dataflow-BigTable連接器中不受支持？

我們在Streaming模式下有一個用例，我們想從管道中跟蹤BigTable上的計數器（某些#items已完成處理），我們需要增量操作。從查看https://cloud.google.com/bigtable/docs/dataflow-hbase，我發現此客戶端不支持HBase API的追加/增量操作。原因是批處理模式下的重試邏輯，但是如果Dataflow保證一次，爲什麼會支持它是一個壞主意，因

2熱度

1回答

使用HBaseStorage從Bigtable通過Pig載入Dataproc

有沒有人有過使用HBaseStorage通過Pig在Dataproc上從Bigtable載入數據的經驗或成功？這是我試圖運行的一個非常簡單的Pig腳本。它會失敗，並顯示無法找到BigtableConnection類的錯誤，我想知道我可能會錯過哪些設置以成功從Bigtable加載數據。 raw = LOAD 'hbase://my_hbase_table' USING org.apac

1熱度

1回答

如何使用HBase shell在Bigtable中設置表壓縮模式？

我使用HBase shell和通常的create table命令在Bigtable中創建表，您可以在其中指定壓縮顯然忽略壓縮屬性。實施例： hbase(main):003:0> create 'table_snappy', {NAME => 'event', VERSIONS => 1, COMPRESSION => 'SNAPPY', BLOOMFILTER => 'ROW'} hbase(

0熱度

1回答

Bigtable設計和查詢關於列族數量

從Cloud Bigtable綱要設計文檔：將數據分組爲列族允許您從單個族或多個族中檢索數據，而不是檢索每個族中的所有數據行。儘可能地將數據分組，以便在最頻繁的API調用中獲得所需的信息，但不能再多了。在我的使用案例中，我可以將所有數據分組到一個單獨的列族（目前訪問模式是檢索所有字段），或將它們分組爲3個邏輯列族，並在查詢時一直指定這些列族。這兩種設計有什麼性能差異？推薦哪種設計？

0熱度

1回答

GoogleCredentialas.getApplicationDefault的NoSuchMethodError

我試圖使用的Cloud Bigtable版API，雖然我知道它在我的Apache梁的工作，當我嘗試使用API直接我遇到這樣的錯誤： Caused by: java.lang.NoSuchMethodError: com.google.auth.oauth2.GoogleCredentials.getApplicationDefault(Lcom/google/api/client/http/H

0熱度

2回答

checkAndPut總是成功

我保持Bigtable中的計數器，並希望把一些數據，當計數器達到X.我目前做這樣的： Put put = new Put(EXAMPLE_ROW_KEY); put.addColumn(EXAMPLE_COLUMN_FAMILY, NEW_QUALIFIER, NEW_VALUE); boolean success = table.checkAndPut(EXAMPLE_ROW_KEY,

0熱度

1回答

無法用HBaseMutationCoder編碼元素

我試圖通過使用cloud-bigtable-client（https://github.com/GoogleCloudPlatform/cloud-bigtable-client）的數據流向Bigtable應用突變（增量）。這裏是我的工作，做什麼一個高度概括： PCollection<SomeData> somedata = ...; somedata.apply(ParDo.of(n

0熱度

1回答

空的平板電腦會發生什麼？

比方說，我創建了一個包含10個初始分割點並因此包含10個初始平板的表格，過了一段時間後，其中一個表達式達到最大尺寸並自動分割。假設我的密鑰是partition_counter，並且我的計數器不斷增加，我將插入到新創建的平板電腦中，而不會插入到舊的平板電腦中。在舊的記錄中的所有記錄達到其TTL（併發生壓縮）之後，平板電腦將變空。此平板電腦是否自動刪除？如果沒有，是否有任何性能或成本影響的空片附

0熱度

1回答

Bigtable基於行的訪問控制模式

我想使用角色實現Bigtable的基於行的訪問控制，以便每行可以允許一對多的角色。我不知道如何輕鬆地將它放入密鑰中。有什麼模式可用於實現這樣的事情？我目前的使用案例是做一個前綴範圍查找與我的其他指數作爲密鑰的一部分已經。