宣布三角洲湖3.0:新通用格式為Apache冰山和Apache Hudi提供自動的兼容性

2023年6月28日
分享這篇文章

新版本統一lakehouse存儲格式和強化三角洲湖作為構建一個開放的lakehouse最好的選擇

舊金山——6月28日,2023年數據和AI公司今天宣布最新貢獻獲獎Linux基金會開源項目三角洲湖三角洲湖3.0的發布。即將發布介紹通用格式(製服),它允許將數據存儲在三角洲讀取,就好像它是Apache冰山或Apache Hudi。統一的猜測,選擇開放的數據格式和消除兼容性頭痛提供自動支持冰山和Hudi三角洲湖內。三角洲湖3.0將允許用戶消除複雜的集成工作由不同的數據格式和專注於構建高性能、lakehouses開放。

磚創建lakehouse架構,這是建立在三角洲湖。我們致力於使三角洲湖開放格式,給客戶最選擇和靈活性,最大的控製自己的數據,一個開放的生態係統的好處beplay体育app下载地址創始人兼首席執行官說:“阿裏Ghodsi磚。“beplay体育app下载地址消費者不應該限製他們的選擇的格式。這個最新版本的三角洲湖,我們讓用戶方便地處理任何他們想要的文件格式,包括冰山和Hudi,同時仍然訪問三角洲湖的行業領先的速度和可伸縮性”。

消除數據孤島

企業迅速采用數據lakehouse架構轉變從昂貴的,專有的數據倉庫,提供有限的功能,不能支持高級用例生成人工智能。到目前為止,數據驅動的組織向lakehouse不得不權衡他們的選擇,選擇三種不同的開放表格格式。與製服,客戶可以實現互操作性beplay体育app下载地址,受益於一個綜合的生態係統的工具從三角洲,冰山和Hudi。

三角洲湖3.0將使企業到處訪問企業數據的廣度——從事務流,結構化和非結構化、在任何一種格式——高性能的方式。新功能包括:

  • 三角洲通用格式(統一):現在,可以讀取數據存儲在三角洲或Hudi好像冰山。製服,δ自動生成冰山或Hudi所需的元數據,從而統一表格格式,所以用戶不需要選擇還是手動格式之間的轉換。組織可以自信地押注於三角洲的通用格式,將工作在生態係統和可以擴展以支持不斷變化的業務需求。
  • 三角洲的內核:為了解決連接器碎片,內核將確保連接器是建立對核心庫,實現了δ規格,減輕用戶需要更新三角洲連接器與每個新版本或協議的變化。與一個穩定的API代碼,開發人員在三角洲地區的生態係統能夠無縫地把連接器最新的三角洲創新,無需負擔返工連接器。反過來,用戶可以快速地利用最新的三角洲特性和更新。
  • 三角洲液體聚類:一個公司麵臨的共同挑戰,實施數據的用例與讀寫的性能。液體聚類的引入是一個創新的飛躍從幾十年舊hive-style表分區,使用一個固定的數據布局。三角洲湖是引入一個靈活的數據布局技術,將提供成本有效的數據聚類數據的增長,這將幫助公司滿足他們的讀寫性能需求。

“三角洲湖3.0,包括通用格式和內核,突顯了開源社區的致力於提高數據可靠性和提供先進的分析方法。這個版本是一個一步創建一個社區主導型生態係統的數據完整性、無縫協作,實時分析工具,“高級副總裁邁克•多蘭表示項目,Linux基金會。

三角洲湖幫助組織利用從數以百計的不同的係統數據分析數據洞察力,報告和構建人工智能模型。這個更新,三角洲湖繼續建立在其無與倫比的性能和用戶友好的界麵。三角洲湖是唯一開放的內置支持的格式三角洲分享安全數據交換的開放標準,促進一個開放的生態係統數據跨平台合作,雲層和地區。Beplay体育安卓版本今天,超過6000個活躍數據消費者每天超過300 pb的數據交換。

“協作和創新金融服務行業都是由開源社區和項目推動的傳說高盛(Goldman Sachs)的開源數據平台,我們保持與非諾合作Beplay体育安卓版本,”首席數據官和尼曼拉斐爾說高盛(Goldman Sachs)數據工程的負責人。“我們一直相信開源技術的未來的重要性,是高興看到磚繼續投資於三角洲湖。組織不應該限製他們的選擇的一個開放的表格格式和通用格式支持在三角洲湖將繼續推動整個社區。”

三角洲湖是世界上使用最廣泛的Lakehouse存儲格式

每年有超過10億次下載,和常規的功能更新來自數百名工程師在AWS等主要業務,Adobe, eBay,為什麼Twilio Uber,三角洲湖是企業想要的開放格式選擇一種靈活的、高性能、開放數據平台,將規模和適應他們的需求發展。Beplay体育安卓版本

更多地了解磚”致力於開源社區訪問://www.eheci.com/product/open-source

磚繼續擴大Lakehouse平台,最近宣布Beplay体育安卓版本Lakehouse應用和普通的磚市場,LakehouseIQ,新的治理能力和一個以數據為中心的人工智能工具的套件用於構建和管理llm lakehouse。

可用性

三角洲湖3.0版本是可用的預覽今天Linux基金會的三角洲湖項目的一部分。

了解更多關於磚的開源社區的承諾,看數據+ AI峰會現場://www.eheci.com/dataaisummit/watch

對磚

磚是數據和AI公司。全世界有超過10000個組織——包括康卡斯特,康泰納仕,和超過50%的財富500強——依賴於磚Lakehouse平台統一數據,分析和人工智能。Beplay体育安卓版本磚的總部設在舊金山,在世界各地設有辦事處。由最初的創造者三角洲湖,Apache引發™,MLflow,磚的使命是幫助團隊解決世界難題的數據。了解更多,請遵循磚推特,LinkedIn,臉譜網

聯係人:(電子郵件保護)

安全港聲明

這信息是提供給磚的總體輪廓產品方向,僅供參考。beplay体育app下载地址顧客購買磚服務應該使他們的購買決策完全依賴服務,目前可用的特性和功能。未釋放的特性或功能描述的前瞻性陳述受變化磚自由裁量權,不得交付按計劃或。

最近的新聞

磚宣布任命亞當導演的澳大利亞和新西蘭來支持業務增長和推動客戶成功
讀到現在
MosaicML磚完成收購
讀到現在
磚加強在東南亞與塞西莉Ng被任命為總經理
讀到現在
磚宣布LakehouseIQ,打開的自然語言接口數據分析到每一個人
讀到現在
磚介紹新生成的人工智能工具,投資Lakehouse AI
讀到現在
查看所有

資源

聯係

新聞查詢:

(電子郵件保護)

保持聯係

熬夜日期和聯係我們通過我們的時事通訊,社會媒體渠道和博客RSS提要。
訂閱簡報

得到的資產

如果你想使用磚材料,請聯係 (電子郵件保護) 並提供以下信息:

你的名字和標題
公司名稱和位置
請求的描述
視圖的品牌指導方針
Baidu
map