跳轉到主要內容
Beplay体育安卓版本平台的博客

有什麼新磚統一編目數據+人工智能峰會2022

所有的數據和人工智能資產統一管理
分享這篇文章

更新:統一目錄現在一般用於AWS和Azure。

今天我們興奮地宣布,統一目錄,統一對所有數據資產的治理解決方案Lakehouse,將通常用於AWS和Azure在即將到來的幾周。目前,你可以申請一個公共預覽或接觸你的磚項目團隊的成員。

在之前的博客,我們製定了我們的願景管理lakehouse以及如何統一目錄可以幫助客戶簡化大規模治理。beplay体育app下载地址這個博客將探索最近更新統一目錄和我們日益增長的合作夥伴生態係統。

有什麼新的統一的目錄數據+人工智能峰會2022 ?

自動數據沿襲所有工作負載

統一目錄現在自動跟蹤數據血統查詢執行的任何語言。數據沿襲捕獲到表和列的水平,而關鍵資產,如筆記本電腦、儀表板和跟蹤工作。血統打開幾個用例,包括評估的影響變化表對數據消費者,和自動生成文檔,消費者可以使用lakehouse理解數據。有關更多信息,請參見我們的最近的博客職位。

內置的數據搜索和發現

統一目錄現在包括一個內置的搜索功能。一旦在統一注冊目錄數據,終端用戶可以很容易地搜索元數據字段包括表名、列名,評論為他們找到他們所需要的數據分析。這個搜索功能自動利用到位的治理模型統一目錄。用戶隻能看到搜索結果進行數據訪問,生產率的提高為用戶服務,和一個關鍵控製數據管理員希望確保敏感數據的保護。

搜索和發現統一目錄

簡化與特權的繼承訪問控製

統一目錄提供了一個簡單的模型來控製對數據的訪問通過UI或SQL。我們已經擴展這個模型允許數據管理員建立訪問表的1000年代通過單擊或SQL語句。這是通過一種特權的繼承模型管理員可以設置訪問整個目錄或政策對象的模式。例如,執行以下SQL語句將ml_team讀訪問權所有當前表和視圖在主目錄,以及任何在未來創建的。

格蘭特選擇目錄主要ml_team

這也可以作為一種集安全訪問目錄和違約模式。一個常見的模式可能會給一個團隊一個模式來存儲數據。現在管理員可以設置一個政策模式,默認情況下所有的團隊成員可以閱讀由其他人創建的對象。

信息模式

數據庫係統內信息模式已經基本資產幾十年了。他們提供了一組預定義的視圖,描述的對象在數據庫中——例如表創建了什麼,當由世衛組織、訪問已獲得在每個水平,在其他的事情。此元數據通常是利用用戶了解係統中的數據可用,而且自動報告生成等主題訪問每個表的水平。統一目錄帶來lakehouse信息模式的概念。每個目錄中創建統一到與一個預定義的模式稱為information_schema定義了一組視圖描述了目錄。這個可以查詢從DBSQL或筆記本電腦環境。
信息模式統一目錄
信息模式統一目錄

Azure身份統一目錄管理

我們感到興奮,統一目錄現在支持使用Azure托管身份訪問管理存儲和外部存儲目錄metastore統一。身份管理微軟Azure構造,為應用程序提供一個身份連接到資源時使用Azure Active Directory (AAD)的支持。到目前為止,統一編目依賴服務主體身份來訪問數據在Azure湖數據存儲(ADLS)。身份管理有兩個主要的好處在這個用例的服務主體。首先,管理身份不需要維護憑證或旋轉的秘密。其次他們提供一種方法來連接到ADLS通過存儲防火牆保護。

升級你的蜂巢Metastore統一目錄

統一目錄現在提供了一個無縫的升級體驗從你現有的蜂巢Metastore利用上麵描述的所有新功能!用戶可以選擇1000年代的表內立刻升級我們的目的建立用戶界麵。升級工具通過複製工作表的元數據從現有蜂巢Metastores metastore統一目錄。這也將自動解決DBFS掛載點定義中使用的表,數據可以跨整個磚安全地訪問帳戶。對於那些喜歡在ui代碼,我們也讓SQL語法(“創建表像…”)用於針對磚集群運行或SQL倉庫。

升級蜂巢Metastore

更好的治理和編目合作夥伴一起

除了所有的特性和功能你讀到的,我們也有一個健康和充滿活力的生態係統的合作夥伴加入我們在支持團結與他們的產品目錄。生態係統每天仍在不斷增長中。

Privacera
“Privacera集成了統一目錄通過利用新的api磚建造的翻譯團隊,通過政策層Privacera建造的。數據集成是透明的消費者和IT管理員和支持相同的細粒度訪問控製功能,支持Privacera集成遺留磚高並發的集群”。- - - - - -鮑斯Durai

鮑斯Durai
鮑斯Durai Privacera公司的共同創始人兼首席技術官。黃宗澤也ASF開源項目的創建者Apache管理員和安全的思想領袖和管理空間。

閱讀更多關於Privacera andUnity目錄

Immuta
統一目錄,物理數據策略執行本地數據磚,微創數據消費者,不再與插件專為不同的引發運行時——執行正確完成。與此同時,Immuta繼續解決管理挑戰,提供活動數據監控、元數據發現/集中,可伸縮的政策編製(表、行、列和單元控製),包括利用聯合目錄的家族特性來簡化策略實施,和遵從性報告/報警。- - - - - -史蒂夫Touw

史蒂夫Touw
史蒂夫Touw Immuta公司的共同創始人兼首席技術官。他曆史悠久的設計大規模geo-temporal分析在美國情報機構——包括第一Hadoop的一些分析和框架來管理複雜的多租戶數據策略控製。

閱讀更多關於Immuta和統一目錄

Alation
Alation和磚幫助組織獲得的數據情報,消除,促進治理能力來推動數字轉換項目。Alation允許組織培養作為一種資產,有助於提高數據發現,幫助理解,促進信任和確保遵守相關政策。利用捕獲的數據統一metastore, Alation將加強我們現有的集成與磚容易包括元數據從多個工作區。磚和Alation最終將提供目錄,Lakehouse血統和策略管理和執法。Alation激動與磚合作,期待共同合作,使數據科學家,工程師和分析師快速將數據轉化為業務洞察力。- - - - - -易卜拉欣“Ibby”壓力

易卜拉欣壓力
易卜拉欣Ibby“壓力是Alation產品營銷主管

Collibra
Collibra最戰略的許多客戶已經發現巨大的價值從磚的力量。beplay体育app下载地址這一直是我們的重點技術集成與統一目錄。Collibra的企業目錄給業務帶來價值和治理角色,因此,我們認為,統一編目的戰術平台重點是一個完美的配對。Beplay体育安卓版本元數據攝入級別的也有好處,因為不再是一個需要有一個磚集群運行的元數據。我們認為血統,直接從一個平台API像統一目錄,更好的質量和更容易更新變化Beplay体育安卓版本隨著時間的處理。- - - - - -沃恩Micciche

沃恩Micciche
沃恩Micciche Collibra技術夥伴關係主任

亞特蘭大
亞特蘭大連接到磚統一目錄的API來提取所有相關元數據驅動的發現,治理,在亞特蘭大和見解。這種集成允許亞特蘭大生成血統表、視圖和列的所有工作和語言在磚上運行。通過配對與元數據提取數據堆棧中的其他工具(例如BI、轉換、英語教學),亞特蘭大可以創建真正的端到端血統。由於統一目錄簡化交付係統,通過API發送完整的血統,這整個經曆是在瞬時大幅減少計算和成本為客戶。beplay体育app下载地址這使得磚客戶整體理解的數據流,獲得更深的洞察數beplay体育app下载地址據填充他們的模型,運行RCA練習,甚至大規模電力規劃治理與亞特蘭大的元數據激活引擎。- - - - - -阿米特您正在

阿米特您正在
阿米特您正在是亞特蘭大的一名軟件架構師主要編製團隊

開始使用統一目錄在AWS和Azure

參觀統一目錄文檔(AWS,Azure)了解更多信息。

免費試著磚

相關的帖子

看到所有Beplay体育安卓版本平台的博客的帖子
Baidu
map