Lakehouse金融服務藍圖

加速你的路徑通過自動化部署Lakehouse金融服務

通過裏卡多Portilla,安東尼修改和薩米爾·帕特爾

2022年6月22日在行業

分享這篇文章

Lakehouse架構有著巨大的動力和被數以百計的意識到我們的客戶。beplay体育app下载地址作為一個數據驅動的組織在受監管的行業細分,多久你想知道是否有Lakehouse藍圖,適合你的獨特的安全與行業需求嗎?這個已經到來。

磚是興奮地介紹一套新的自動化模板部署數據lakehouse,專門為金融服務定義(FS)。Lakehouse FS的藍圖起程拓殖模板,是一組特定的金融服務,包括從超過600 FS客戶的最佳實踐和模式。beplay体育app下载地址這是專為關鍵安全和合規政策和提供FS-specific庫作為關鍵用例的快速入門,包括監管報告和交易後的分析。你現在可以在幾分鍾內啟動並運行與數周或數月。所有的工作建立在廣泛采用磚起程拓殖的提供者,這是部署在1000 +磚客戶在撰寫本文時。beplay体育app下载地址

自動部署模板的核心組件包括:

安全的連接AWS,Azure和GCP。
安全訪問外部雲存儲桶(AWS S3, Azure Blob存儲)配置為允許細粒度訪問基於敏感數據的訪問權限。
創建磚組根據跨組織FSI的角色限製訪問(可配置)用於個人身份信息(PII)的限製。
預裝圖書館、快速入門和集群處理關鍵FS用例,包括數據質量執法,執法和時間序列數據模型模式ETL包。

讓我們更詳細地走過的Lakehouse FS藍圖提供的關鍵功能來加速你的旅程在部署Lakehouse架構。

安全

FSIs需要處理越來越多和複雜的安全威脅,以及不斷變化的監管環境,所有這一切正在發生的大量增長的數據(和重要性)。食品安全檢驗局,確保數據安全,隱私和遵從性絕對是至關重要的。磚了Lakehouse FS藍圖,以更好地將關鍵安全和合規政策直接部署配置。

FSI采用者的基礎上磚Lakehouse平台Beplay体育安卓版本,有標準的安全最佳實踐在市場上已經建立了。銀行、保險、和資本市場公司的需求特性,比如安全連通性(沒有公共ip),通過雲安全通信骨幹(例如私人聯係,AWS),以及用戶組之間定義良好的數據隔離。在起程拓殖模板,我們已經將所有的自動部署這些最佳實踐。

數據治理

盡可能多的FSIs lakehouse構建他們的數據,他們能夠民主化數據在整個組織中,使其可訪問。FSIs必須知道如何處理敏感數據,並能夠控製和審計訪問。湖泊管理數據,管理員常常依賴於cloud-vendor-specific安全控製,如我的角色或基於角色的訪問控製(RBAC)和訪問控製造成的,管理數據。我們認為組織需要限製在工作區中某些數據分類和編碼這些設置。

注意,磚已經啟動了統一目錄在公共預覽,這讓細粒度lakehouse數據治理和安全使用熟悉的,開放的接口。統一目錄允許組織管理細粒度數據權限使用標準ANSI SQL或一個簡單的UI,使他們能夠安全地打開lakehouse廣泛的內部消費。它統一在雲層和數據類型。最後,它超越管理表來管理其他類型的數據資產,如機器學習(ML)模型和文件。因此,企業得到一個簡單的方法來管理他們的數據和人工智能(AI)的資產。FS的Lakehouse藍圖將將統一更新目錄時,它通常是可用的。

金融服務快速入門

我們經常聽到這個數據團隊和領導人需要交付價值在幾周,而不是幾個月或幾年。數據團隊通常會花幾個星期去理解問題,在收購之前,集成和轉換數據。隻有這樣才能數據團隊開始開發,優化和部署模型投入生產。這個延遲從識別需求,通過潛在的解決方案,最終實現,甚至看到結果帶走了勢頭最重要的數據科學計劃。

幫助客戶克服這些挑戰,磚beplay体育app下载地址創建Python庫,幫助加快金融服務用例。作為FS的Lakehouse藍圖的一部分,我們預裝這些庫標準集群,從兩個快速入門幫助企業達到速度與最佳實踐:

Waterbear:Waterbear可以解釋企業範圍的數據模型(如監管報告)和撥備前表、流程和數據質量規則,加快生產數據的攝入和開發生產工作流程。這允許FSIs部署Lakehouse金融服務與彈性數據管道和最小發展開銷。有關更多信息,讀這篇文章博客。

節奏:節奏是一組時間序列的工具來進行時間序列處理簡單的磚。通過結合蜱蟲的多功能性質數據,可靠的數據管道和節奏,FSIs可以釋放指數的價值從不同的用例以最小成本和快速執行周期。有關更多信息,讀這篇文章博客。

這僅僅是開始。當我們繼續構建投資組合並為我們現有的創建標準庫解決方案加速器,我們將添加新庫或預配置集群到Lakehouse FS藍圖提供越來越多的FS客戶的關鍵能力。beplay体育app下载地址

關鍵的好處Lakehouse FS藍圖

建立金融服務

Lakehouse FS藍圖是專門設計來支持合規管理和安全需要在金融服務業。最佳實踐實現的,包括關鍵的安全控製和治理——基於最佳實踐和模式,我們看到在600 +的客戶。beplay体育app下载地址你有一個起點,你可以根據需要配置額外的政策基礎。

通過自動化節省時間和資源

FS Lakehouse的藍圖,你不需要花很多時間配置磚。相反,建立一個開放源碼的部署框架和關注貴公司獨特的定製。開發人員可以更快和數據遷移更費時。你現在可以在幾分鍾內啟動並運行,而不是數周或數月。

加速度的價值

預配置集群簡化和加快核心FS的應用用例允許你和你的業務利益相關者價值更快。這些庫減少你的時間在各種各樣的領域包括數據工程,模式開發和模型發展。解決更多的用例,檢查所有的磚解決方案加速器,你可以很容易地下載並導入到您的工作區。

多重雲

采用多重雲是蓄勢待發,Gartner預測,到2022年,75%的企業客戶使用雲基礎設施即服務(IaaS)beplay体育app下载地址將采用一種深思熟慮的多重雲戰略。有鑒於此,磚已經創建了Lakehouse FS藍圖每個主要公共雲,AWS Azure和豐富。你可以避免重複的最佳實踐在雲層和更好的確保在你的雲部署lakehouse一致。