讓你的數據湖CCPA符合一個統一的數據和分析方法
2019年12月18日, 在產品
得到一個O ' reilly的新電子書的早期預覽一步一步的指導你需要開始使用三角洲湖。
每天有更多的數字數據被抓獲,有各種監管標準等的上升通用數據保護監管(GDPR)和最近的加州消費者隱私法案》(CCPA)。這些隱私法和標準旨在保護消費者免受企業不當收集、使用、或分享他們的個人信息,和改變企業的方式來管理和保護消費者的數據收集和存儲。
類似於GDPR, CCPA賦予個人請求:
- 個人信息被抓獲,
- 個人信息是如何被使用的,
- 個人信息刪除。
此外,CCPA包含“家庭”的信息。這可能大大擴大了個人信息的範圍受製於這些請求。未能及時履行可能導致法定罰款和法定賠償(消費者甚至不需要證明損害賠償),可以迅速崛起。公司麵臨的挑戰在加州做生意CCPA或者主題,然後,是確保他們可以很快找到,安全,和刪除個人信息。
許多公司錯誤地認為數據隱私GDPR合規流程和控製到位將保證完全符合CCPA-and雖然你可能做了準備GDPR是有用的和一個偉大的開始不太可能足夠了。公司需要重點理解他們需要合規,必須確定哪些流程和控製可以有效地防止濫用和非法出售用戶數據。
你準備CCPA嗎?
CCPA企業可能需要刪除所有消費者的個人信息。今天許多組織正在使用或計劃使用數據存儲湖的絕大多數數據為了有一個全麵的視圖的客戶和業務和權力下遊數據科學、機器學習和業務分析。beplay体育app下载地址湖缺乏數據結構使它具有挑戰性的定位和刪除個人記錄保持符合監管要求。
這是至關重要的應對消費者的刪除請求時,如果一個業務接收超過幾個消費者權利請求在很短的時間內,花費的資源符合要求的效果將是巨大的。企業不符合CCPA需求由1月1日,2020年可能受到訴訟和民事處罰。CCPA還包含一個“lookback”時期將它應用於行動和個人信息自1月1日,2019年,使其迅速得到這些解決方案的關鍵。
把你的數據安全數據以外的湖
堅持CCPA需求時,您的數據湖應該使您能夠應對消費者權利要求在規定的時間內沒有阻礙你的業務。不幸的是,大多數湖泊缺乏數據管理和數據操縱功能快速定位和刪除記錄,使這種挑戰。
幸運的是,磚提供了一個解決方案。的磚統一數據分析平台Beplay体育安卓版本簡化了數據訪問和工程,培育一個協作環境,支持分析和機器學習。beplay娱乐ios作為平台的一部分,磚提供了一個Beplay体育安卓版本統一的數據服務,確保您的數據管道的可靠性和可擴展性,數據湖泊和數據分析工作流。
的一個主要組件的磚統一數據服務三角洲湖一個開源存儲層,將提高數據的可靠性,性能,和生命周期管理您的數據。With improved data management, organizations can start to think “beyond the data lake ” and leverage more advanced analytics techniques and technologies to extend their data for downstream business needs including data privacy protection and CCPA compliance.
開始構建一個CCPA-friendly數據與三角洲湖湖
湖三角洲湖提供數據和結構化數據管理係統包括事務的能力。這使您能夠輕鬆快速地搜索、修改和清潔你的數據使用標準的DML語句(例如刪除、更新合並成)。
開始,攝取你的原始數據與火花api,你熟悉和把他們寫成三角洲湖表。這樣做也將元數據添加到您的文件。如果你的數據已經在拚花格式,你也可以選擇轉換鑲花的文件以三角洲湖表沒有修改任何數據。三角洲使用開放文件格式(拚花)所以沒有被鎖的擔憂可以快速、輕鬆地將你的數據轉換成另一種格式如果你需要。
一旦攝入,你可以很容易地搜索和修改各個記錄在你的三角洲湖表。最後一步是使三角洲湖你的真理的單一來源,消除任何潛在的原始數據。這消除了任何揮之不去的記錄您的原始數據集。我們建議設立一個保留政策與AWS或Azure 30天或更少的自動刪除原始數據,因此不需要采取進一步行動來刪除原始消費者數據滿足CCPA響應時間。
我在數據刪除數據如何使用三角洲湖湖?
你可以找到並刪除任何個人信息相關的消費者通過運行兩個命令:
- 刪除數據,郵件= '(電子郵件保護)”;
- 真空數據;
第一個命令標識記錄包含字符串“(電子郵件保護)“列中存儲的電子郵件,並刪除包含這些記錄的數據重寫相應的潛在消費者的獨特的個人數據刪除的文件,標誌著舊文件刪除。
第二個命令清除δ表,刪除任何陳腐的記錄已經被邏輯刪除,在默認的保存期。使用默認的保持期為7天,這意味著文件標記為刪除會縈繞在你運行真空命令至少7天後。您可以輕鬆地設置與安排工作磚作業調度器真空運行命令的自動化。你也可以熟悉三角洲湖的時間旅行功能,它允許你保留曆史版本的三角洲湖表如果你需要查詢一個表的早期版本。請注意,當您運行真空時,你將失去時間旅行的能力回到一個版本比默認7天數據保存期。
運行這些命令後,您現在可以安全狀態,你已經刪除了必要的消費者數據,記錄數據。
還有什麼磚和CCPA消費者權利請求幫助我嗎?
一旦用戶的個人信息已被刪除從數據湖,同樣重要的是要把這種個人信息從您的數據團隊所使用的工具。這些工具通常駐留在本地數據科學家或工程師的筆記本電腦。一個更好更安全的解決方案是使用磚與托管數據科學的空間數據團隊可以準備,探索和模型數據協作共享筆記本的環境。beplay娱乐ios這提高了團隊的工作效率,創造一個安全,集中整個環境分析工作流。
幫助你達到CCPA合規要求,磚為您提供永久刪除個人信息隱私保護工具,要麼各命令或每本級別。
當你刪除一個筆記本,它是搬到垃圾。如果你不采取進一步的行動,這將是永久性的30天內刪除——讓你有信心在規定的時間內被刪除CCPA和GDPR。
如果因為任何原因,你需要更快,我們也提供能力永久刪除垃圾中的個別項目:
刪除所有項目在一個特定用戶的垃圾:
或清除刪除所有項目在一個工作區命令,包括刪除筆記本電池,筆記本評論或MLFlow實驗:
你也可以選擇清洗磚筆記本的修訂曆史,這是有用的,以確保永久刪除舊的查詢結果:
開始使用CCPA合規數據和分析
磚的統一數據分析平台和三角洲湖,你可以帶增強的數據安全性,可靠性,性能,和生命周期管理Beplay体育安卓版本您的數據湖而實現你所有的分析需求。組織現在可以快速找到並刪除個人記錄數據以滿足CCPA湖訪問請求和合規需求沒有阻礙他們的業務。
了解更多關於三角洲湖和磚統一數據分析平台Beplay体育安卓版本。注冊你的免費的磚試驗現在。