avro

    0熱度

    1回答

    只是我們面臨的一個設計問題。 我有鑲木格式的蜂巢外部表列如下: describe payments_user col_name,data_type,comment ('amount_hold', 'int', '') ('id', 'int', '') ('transaction_id', 'string', '') ('recipient_id', 'string', '') ('y

    3熱度

    2回答

    我試圖用這個Avro的shcema { "namespace": "nothing", "name": "myAvroSchema", "type": "record", "fields": [ { "name": "checkInCustomerReference", "type": "string" },

    0熱度

    2回答

    我使用Kafka 0.10.2和Avro對我的消息進行了序列化,包括密鑰和數值數據。 現在我想使用Kafka Streams,但我試圖爲GenericData.Record類編寫Serde類。 import org.apache.avro.generic.GenericData.Record; import io.confluent.kafka.schemaregistry.client.Sch

    1熱度

    1回答

    我嘗試不同的東西可以與下列Web UI https://schema-registry-ui.landoop.com 我不能似乎把下列註冊表: { "namespace": "test.avro", "type": "record", "name": "test", "fields": [ { "name": "field1",

    0熱度

    1回答

    請參見下面的示例代碼: User datum = new User("a123456", "[email protected]"); Schema schema = ReflectData.get().getSchema(datum.getClass()); DatumWriter<Object> writer = new ReflectDatumWriter<>(sch

    0熱度

    2回答

    我正在使用apache avro並希望從我的模式中獲取邏輯類型。我嘗試使用函數getLogicalType(),但它返回null。我不明白什麼是錯的。我的模式如下。 { "namespace": "example.avro", "type": "record", "name": "User", "fields": [ {"name": "name

    0熱度

    2回答

    我試過以下Avro IDL中引用邏輯類型timestamp-millis的代碼,它不起作用。 是否需要在Avro IDL中使用邏輯類型的導入?或者邏輯類型是不可用的,我需要使用原始類型(在這種情況下是long)呢? protocol test { record test { timestamp-millis time; } } 結果: Exception in

    -1熱度

    3回答

    在Hadoop文件系統上執行更新的最佳方法是什麼?對於實例,我有一個包含數據的avro文件,爲了下一次運行,我需要更新avro文件本身中的數據。我們如何解決這個問題? 例:我對HDFS以下數據,需要更新的 「街道」 數組下一次 { 「名稱」 爲: 「DistrictName」, 「_class」: 「org.bitbucket .codezarvis.api.dto.DistrictDocumen

    0熱度

    1回答

    我正在與Apache Kafka一起向Kafka主題發送消息。我試圖在Avro Schemas中使用包含枚舉類型的工會進行消息驗證。但是我在union中使用枚舉類型時遇到了一個問題。我通過POSTMAN工具使用Kafka REST API將記錄/消息發佈到具有模式驗證的主題。下面是請求負載包括架構和記錄在線 - { "key_schema": "{\"type\": \"record\"

    1熱度

    1回答

    我有一個指定模式的avro文件。 當我加載Avro文件時,他們總是以GenericData出現,即使我指定了Schema。 val schema = Article.Schema$ val job = new Job() AvroJob.setInputKeySchema(job, schema) val rootDir = "path-to-avro-files" val article