apache Avro Avro fileJune 2021是一個數據序列化係統。Avro提供:豐富的數據結構。緊湊、快速二進製數據格式。一個容器f……

[User16826994223]

Avro文件

2021年6月11日

Apache Avro是一個數據序列化係統。Avro提供:

• 豐富的數據結構。
• 緊湊、快速二進製數據格式。
• 一個容器文件,存儲持久數據。
• 遠程過程調用(RPC)。
• 簡單的集成動態語言。代碼生成不需要讀或寫數據文件或使用或實現RPC協議。代碼生成一個可選的優化,隻值實現靜態類型語言。

的Avro數據源支持:

• 模式轉換:Apache火花之間自動轉換的SQL和Avro記錄。
• 分區:容易閱讀和寫作分區數據沒有任何額外的配置。
• 壓縮:壓縮時使用寫作Avro磁盤。支持的類型是未壓縮的時髦和縮小還可以指定抑製水平。名字:記錄名稱和名稱空間通過參數與recordName recordNamespace的地圖。