GDPR和CCPA符合三角洲湖

本文描述了如何使用磚來管理的通用數據保護監管三角洲湖(GDPR)和加州消費者隱私法案》(CCPA)合規數據湖。合規通常需要點刪除或刪除中的單個記錄大量的數據。大數據湖泊三角洲湖加速點刪除ACID事務,允許您查找和刪除個人idenfiable信息(PII)為了應對消費者GDPR或CCPA請求。

合規計劃您的數據模型

建模數據處理PII遵從性是一個重要的一步。有許多可行的方法取決於您的數據消費者的需求。

一個經常應用方法pseudonymization標記,或可逆的個人信息元素(標識符)鍵(假名),不能從外部確認。合規通過pseudonymization需要仔細的規劃,包括以下幾點:

  • 存儲信息的方式與假名而不是標識符。

  • 維護嚴格的政策將標識符的數據訪問和使用假名。

  • 管道或存儲政策來消除原始數據。

  • 邏輯定位和刪除假名和標識符之間的聯係。

三角洲湖如何簡化點刪除

三角洲湖有很多數據不內置的優化。加快點刪除,磚建議使用z值在字段,你使用的刪除操作。

默認情況下,三角洲湖表曆史保留30天,使其可用“時間旅行”和回滾。您可以使用真空函數刪除文件不再引用的三角洲表和保留指定閾值以上,永久刪除數據。