我們為什麼需要青銅、白銀和黃金層數據?

[Joezhu]

我們為什麼需要層次的數據?為什麼我們不能隻是去一層的所有數據就工作了呢?

[01 _binary]

根據磚的文檔,的目標增量和逐步提高的結構和質量數據流經每一層的體係結構。

大多數時候,原始數據不是有用和需要清洗或補充與其他數據集。

我們可以將它存儲在一個層,但它是更容易理解,如果這些都是分開管理。這可以做到的邏輯或物理。這是你的選擇。你會發現使用情況下,有人可能需要訪問黃金青銅數據用例。可以有一些數據質量問題。

[hdhax · Accepted solution]

這裏有一些原因數據層是必要的。

1。性能優化:不同層次的數據允許優化性能基於每一層的具體需求。例如,高優先級或頻繁訪問的數據可以存儲在一個高性能層與更快的訪問時間和處理能力。這將確保關鍵數據是現成的,能夠很快的根據情況處理,導致運營效率提高。

2。資源分配:數據層使組織分配資源,如存儲、計算能力和帶寬效率。並非所有的數據需要相同級別的資源。通過隔離數據到不同的層中,組織可以匹配資源分配每一層的具體需求。
3所示。數據保留策略:不同類型的數據可能有不同的保留要求根據法律、合規,或業務需求。層的數據便於數據保留策略的實現。

[Vishwas]

除了提到的原因,如資源配置、性能優化和保留,也有數據管理方麵的考慮。

銅層通常是非常接近源,使replay-ability調試以及點上遊係統時沒有accesible。銀層支持重複數據刪除和管理/企業需求,基本複製仍然可用在青銅訪問的要求。

blendin金層允許數據,查找和濃縮數據集的各種用例

[Vishwas]

@Kaniz