avro4s

    0熱度

    2回答

    有沒有一種方法可以將一個scv文件轉換爲Avro而不使用Apache Spark。我看到大部分帖子都使用了火花,這在我的情況下是無法實現的。我有一個單獨的文件中的架構。我正在考慮一些使用Schema並將csv轉換爲avro的自定義序列化器和反序列化器。任何一種參考都適合我。 謝謝

    0熱度

    1回答

    我是AVRO的新手。我們已經開始使用AVRO模式來讀取數據。 現在我們有一個用例,在閱讀時需要截斷數據。 假設我的Avro schcema是這樣 { "name": "table", "namepsace": "csd", "type": "record", "fields": [ {"name": "CustId", "type":"strin

    4熱度

    2回答

    我有JSON文件&將JSON架構解析爲AVRO架構。我有點困惑,是否必須使用AVRO文檔中定義的數據類型編寫手動AVRO模式。 或者是否有任何自動化方法/功能/程序可以按照要求完全相同地工作?

    0熱度

    1回答

    我正在面臨的問題 - 減少具有字符串和數組值的avro文件。 org.apache.avro.AvroTypeException: `Describe hdfs:/test/test.avro number STRING totalProductFee STRING productID STRING

    1熱度

    1回答

    我試圖開始與avro & avro4s,我遇到了麻煩得到一個愚蠢的例子工作。 我甚至不能讓我自己在源回購發現編譯一個測試版本 - https://github.com/sksamuel/avro4s/blob/master/avro4s-core/src/test/scala/com/sksamuel/avro4s/AvroJsonInputTest.scala#L14-L20 我得到的稱號cou

    1熱度

    1回答

    我有小測試類是這樣的: package test.avro object Test extends App { import java.io.ByteArrayOutputStream import com.sksamuel.avro4s.AvroOutputStream case class Composer(name: String, birthplace: