2021年5月

這些功能和Databricks平台的改進於2021年5月發布Beplay体育安卓版本。

請注意

發布是階段性的。您的Databricks帳戶可能要在初始發布日期後一周或更長時間才能更新。

Databricks機器學習:麵向ML整個生命周期的原生數據和協作解決方案beplay娱乐ios

2021年5月27日

新的機器學習角色,可以在Databricks UI的側邊欄中選擇,讓您輕鬆訪問新的ML專用環境,包括模型注冊表和公共預覽中的四個新功能:

  • 一個新的儀表板頁麵有方便的資源,最近,和入門鏈接。

  • 一個新的實驗頁麵這集中了實驗發現和管理。

  • AutoML,這是一種從數據自動生成ML模型並加速生產的方法。

  • 特色商店,這是一種對ML特性進行編目並使其可用於培訓和服務的方法,增加了重用性。使用基於數據譜係的特性搜索(利用自動記錄的數據源),您可以通過簡化的模型部署(不需要更改客戶端應用程序)使特性可用於訓練和服務。

詳細信息請參見介紹Databricks機器學習

SQL Analytics被重命名為Databricks SQL

2021年5月27日

SQL Analytics被重命名為Databricks SQL。有關詳細信息,請參見Databricks SQL發布說明

使用Delta活動表創建和管理ETL管道(公開預覽)

2021年5月26日

Databricks很高興介紹Delta Live Tables,這是一種雲服務,可以使提取、轉換和加載(ETL)開發簡單、可靠且可伸縮。Delta Live Tables:

  • 提供直觀和熟悉的聲明性接口來構建管道。

  • 使您能夠監視數據處理管道,可視化依賴項,並跨不同環境管理管道和依賴項。

  • 啟用測試驅動的開發、數據質量約束的實施和統一的數據錯誤處理策略的應用

  • 自動化數據處理管道的部署,以便輕鬆地升級、回滾和增量地重新處理數據。

看到什麼是Delta Live Tables?獲取詳細信息。請與Databricks代表聯係以請求訪問。

減少了客戶管理vpc所需的出口規則範圍

2021年5月26日

E2工作區使用customer-managed vpc,您現在可以為您的工作區配置一組更受控製的出口(出站)規則安全組子網級網絡ACL

  • 以前,Databricks需要訪問0.0.0.0/0用於所有端口和協議。

  • 現在,在所有情況下,您隻需要為端口443和3306授予TCP訪問權,如果使用端口6666則額外授予TCP訪問權PrivateLink

不需要立即改變;更廣泛的出口規則繼續發揮作用。

使用自己的密鑰加密Databricks SQL查詢和查詢曆史(公開預覽)

2021年5月20日

詳細信息請參見Databricks SQL發布說明

增加了終止的通用集群的數量限製

2021年5月18日:3.46版

現在Databricks工作區中最多可以有150個終止的通用集群。之前的上限是120。詳細信息請參見終止集群.集群API返回的終止的通用集群數量的限製列表請求現在也是150。

增加固定集群數量的限製

2021年5月18日:3.46版

現在Databricks工作區中最多可以有70個固定集群。之前的上限是50個。詳細信息請參見固定一個集群

管理筆記本結果的存儲位置(公共預覽)

2021年5月18日:3.46版

您現在可以選擇存儲所有筆記本結果在您的根S3存儲桶無論大小或運行類型。默認情況下,交互式筆記本的一些結果存儲在Databricks中。一個新的配置使您可以將這些存儲在根S3存儲桶在你自己的賬戶上。詳細信息請參見配置筆記本結果存儲位置

此功能對作為作業運行的筆記本電腦沒有影響,其結果始終存儲在根S3存儲桶

新的改進的帳戶控製台是GA

2021年5月17日

賬戶控製台現在是GA。可以在Databricks平台E2版本Beplay体育安卓版本,現在幾乎所有Databricks帳戶都啟用了該功能。

新的帳戶控製台讓你能夠在一個地方管理所有的工作空間:

  • 創建和管理多個工作區的生命周期。

  • 查看您的組織在所有工作區的Databricks上的花費。

  • 委托帳戶管理並為帳戶管理設置單點登錄

詳細信息請參見管理您的Databricks帳戶

工作空間存儲的客戶管理密鑰(公共預覽)

2021年5月10日

用於工作空間存儲的客戶管理密鑰現在在公共預覽在所有支持E2架構的地區的數據庫,地區除外us-west-1.工作空間存儲密鑰為工作空間加密兩種類型的數據。它加密工作區的S3 bucket,該bucket包含DBFS根和工作空間係統數據。還可以使用相同的密鑰加密工作區的集群節點EBS卷。您可以將客戶管理的工作區存儲鍵添加到新的或現有的E2工作區。

更改客戶管理密鑰的Account API

2021年5月10日

帳戶API 2.0包括以下更新,以支持工作空間存儲的客戶管理密鑰的公開預覽,以及將“筆記本的客戶管理密鑰”重命名為“托管服務的客戶管理密鑰”:

  • 主要配置,有一個新的必需屬性use_cases.它表示密鑰的用途。

  • 工作空間配置,customer_managed_key_id改名為managed_services_customer_managed_key_id.今天之後的API調用將使用新名稱進行請求和響應。

穀歌雲存儲連接器(GA)

2021年5月4日:3.45版

在“Databricks with”中可以對穀歌GCS (Cloud Storage)桶進行讀寫操作g:url。看到穀歌雲存儲

Databricks Runtime 7.4係列支持結束

2021年5月3日

對Databricks Runtime 7.4、Databricks Runtime 7.4 for Machine Learning和Databricks Runtime 7.4 for Genomics的支持已於5月3日結束。看到Databricks運行時支持生命周期

使用增強的審計日誌進行更好的治理

2021年5月3日至10日:3.45版

審計日誌現在捕獲:

  • 從筆記本單元格下載結果(操作:downloadPreviewResultsdownloadLargeResults).

  • 導出筆記本(操作:workspaceExport).

  • 更改允許或阻止筆記本單元下載的管理控製台設置(操作:workspaceConfEdit參數:workspaceConfKeysenableResultsDownloading).

  • 更改允許或阻止筆記本導出的管理控製台設置(操作:workspaceConfEdit參數:workspaceConfKeysenableExportNotebook).

參見工作空間級審計日誌事件表

使用SSO對帳戶控製台進行身份驗證(公共預覽)

2021年5月3日至10日:3.45版

帳戶管理員現在可以使用組織的標識提供程序支持的單點登錄(SSO)對帳戶控製台進行身份驗證。該帳號必須為Databricks平台E2版本。Beplay体育安卓版本大多數Databricks帳戶現在在E2;如果您不確定,請谘詢Databricks代表。

詳細信息請參見為Databricks帳戶控製台設置單點登錄

Repos用戶現在可以使用個人訪問令牌與Azure DevOps集成

2021年5月3日至10日:3.45版

Repos現在支持Azure DevOps。詳細信息請參見設置Databricks回購

數據庫管理員可以使用工作空間的SCIM API 2.0 (ServicePrincipals)創建僅api的服務主體,並授予它們訪問Databricks資源的權限,就像普通用戶一樣。管理員可以創建個人訪問令牌我代表服務主體。工作空間必須在Databricks平台的E2版本上。Beplay体育安卓版本詳細信息請參見管理服務主體.(公共預覽版)

作業服務穩定性和可伸縮性改進(公開預覽)

2021年5月3日至10日:3.45版

為了增加Jobs服務的穩定性和可伸縮性,現在將為每個新作業和運行分配一個惟一的、非順序的標識符,該標識符不能單調地增加。使用喬布斯API和依賴於順序或單調遞增的標識符必須被修改以接受非順序和無序的id。

服務主體提供對Databricks資源的僅api訪問(公開預覽)

2021年5月3日至10日:3.45版

數據庫管理員可以使用工作空間的SCIM API 2.0 (ServicePrincipals)向Databricks添加僅api的服務主體,並授予它們訪問資源的權限,就像普通用戶一樣。管理員可以創建個人訪問令牌我代表服務主體。詳細信息請參見管理服務主體