2020年7月
這些特性和磚平台改進2020年7月被釋放。Beplay体育安卓版本
請注意
版本正在上演。磚帳戶可能沒有更新,直到一周後最初的發布日期。
網絡終端(公共預覽版)
2020年7月8月29日4日:3.25版
網絡終端為用戶提供一個方便的和高度交互的方式可以連接到允許集群上運行shell命令,包括如Vim或者Emacs的編輯器。示例使用的網絡終端包括監控資源使用和安裝Linux包。
與使用SSH、網絡終端可以使用許多用戶在一個集群,並且不需要設置鍵。
有關詳細信息,請參見網絡終端。
新的、更安全的全球init腳本框架(公共預覽版)
2020年7月29日——8月4日:3.25版
新的全球init腳本框架帶來明顯改善了遺產全球init腳本:
Init腳本更安全,需要管理員權限來創建、查看和刪除。
與腳本相關的所有發射失敗記錄。
你可以設置多個init腳本的執行順序。
Init腳本可以參考相關的環境變量。
Init腳本可以創建和管理使用管理設置頁麵或新的全球Init腳本REST API。
磚建議你現有的遺留全球init腳本遷移到新框架利用這些改進。
有關詳細信息,請參見全球init腳本。
現在IP訪問列表
2020年7月29日——8月4日:3.25版
IP訪問列表API現在投入使用。
GA版本包括一個變化,即重命名的list_type
價值觀:
白名單
來允許
黑名單
來塊
使用IP訪問列表API來配置你的磚工作區,這樣用戶連接到服務隻有通過現有的企業網絡安全的周長。磚管理員可以使用IP訪問列表API定義一組通過IP地址,包括允許和阻止列表。所有傳入訪問web應用程序和REST api要求授權用戶連接從一個IP地址,保證工作區不能從公共網絡訪問咖啡店或機場,除非用戶使用VPN。
這個特性要求企業計劃。
有關更多信息,請參見IP訪問列表工作區。
新文件上傳對話框
2020年7月29日——8月4日:3.25版
你現在可以上傳小表格數據文件(csv),從一個筆記本通過選擇訪問它們上傳數據的筆記本文件菜單。生成的代碼顯示了如何將數據加載到熊貓或DataFrames。管理員可以禁用這個特性在管理控製台中高級選項卡。
有關更多信息,請參見在DBFS瀏覽文件。
SCIM API過濾和排序的改進
2020年7月29日——8月4日:3.25版
SCIM API現在包括這些過濾和排序的改進:
管理員用戶可以過濾用戶
活躍的
屬性。所有用戶都可以使用的排序結果
sortBy
和排序方式
查詢參數。默認是按ID排序。
磚7.1運行時的遺傳算法
2020年7月21日
磚7.1運行時帶來的許多附加功能和改進磚7.0運行時,包括:
穀歌BigQuery連接器
%皮普
命令來管理Python庫安裝在筆記本會話考拉安裝
許多三角洲湖的改進,包括:
設置用戶定義元數據提交
得到最後的版本提交當前寫的
SparkSession
轉換拚花表由結構化流使用
_spark_metadata
事務日誌合並成
性能改進
詳情,請參閱完成磚運行時的7.1(不支持)發行說明。
磚運行時7.1毫升
2020年7月21日
磚7.1運行時機器學習是建立在磚上運行7.1和圖書館帶來了以下新特性和變化:
pip和conda魔法命令默認啟用
spark-tensorflow-distributor: 0.1.0
枕頭7.0.0 - > 7.1.0
- > 1.5.1 pytorch 1.5.0
torchvision 0.6.0 - > 0.6.1
horovod 0.19.1 - > 0.19.5
mlflow 1.8.0 - > 1.9.1
詳情,請參閱完成磚運行時為7.1毫升(不支持)發行說明。
磚7.1運行時的基因組
2020年7月21日
磚7.1運行時的基因組學是建立在磚上運行7.1和帶來以下新的特點:
發瘋的轉換
重塑GloWGR輸出功能
RNASeq輸出未配對的比對
詳情,請參閱完成磚7.1運行時的基因組學(不支持)發行說明。
IP訪問列表API更新
2020年7月15至21日:3.24版
以下IP訪問列表API屬性改變了:
updator_user_id
來updated_by
creator_user_id
來created_by
Python筆記本現在支持多種輸出每個細胞
2020年7月15至21日:3.24版
Python筆記本現在支持多種輸出每個細胞。這意味著你可以擁有任意數量的顯示、displayHTML,或在一個細胞打印語句。利用能夠查看原始數據和情節在同一單元格中,或全部輸出,成功之前你遇到一個錯誤。
該功能需要磚運行時的7.1或以上,在磚7.1運行時的默認情況下是禁用的。使它通過設置spark.databricks.workspace.multipleResults.enabled真正的
。
暫停工作時間表
2020年7月15至21日:3.24版
現在工作日程安排暫停和Unpause按鈕使它容易暫停和恢複工作。現在你可以更改工作安排沒有額外的工作運行開始時進行更改。當前運行或運行由現在運行不受影響。有關詳細信息,請參見暫停和恢複工作進度。
喬布斯API端點驗證運行ID
2020年7月15至21日:3.24版
的工作/運行/取消
和工作/運行/輸出
現在驗證API端點run_id
參數是有效的。無效的參數這些API端點返回HTTP狀態碼400,而不是代碼500。
SQL在筆記本自動格式
2020年7月15至21日:3.24版
你現在可以格式化SQL筆記本電池從鍵盤快捷鍵命令上下文菜單,和筆記本電腦編輯菜單(選擇編輯>格式SQL細胞)。SQL格式更容易閱讀和維護代碼。它適用於SQL筆記本以及%的sql
細胞。
使用密碼訪問控製配置,用戶需要使用SSO登錄或使用令牌驗證(公共預覽版)
2020年7月1 - 9日:3.23版
如果你的磚工作區使用單點登錄(SSO),現在可以分配密碼權限,防止管理用戶使用自己的用戶名和密碼登錄到磚UI。你也可以否認非管理用戶和組的能力驗證的磚REST api的用戶名和密碼,強迫他們使用個人訪問令牌。密碼訪問控製要求保費計劃或以上。
看到(可選)配置密碼訪問控製。
控製用戶的個人訪問令牌,令牌管理API(公共預覽版)
2020年7月1 - 9日:3.23版
現在磚管理員可以使用令牌管理API來管理用戶數據磚個人訪問令牌:
監控和撤銷用戶的個人訪問令牌。
控製未來的一生令牌在你的工作區。
控製哪些用戶可以創建和使用令牌。
看到管理個人訪問令牌。
Customer-managed VPC部署(公共預覽)現在可以使用區域VPC端點
2020年7月8日:3.23版
如果你參與customer-managed VPC預覽與集群安全連接,現在您可以配置您的VPC隻使用更為直接,區域VPC AWS服務端點安全連接和降低成本而AWS全球端點。有關詳細信息,請參見區域端點。
集群工作節點之間加密流量(公共預覽版)
2020年7月7日
在磚,用戶查詢或轉換發送給您的集群在一個加密的通道。集群工作節點之間的數據交換,然而,在缺省情況下是不加密的。如果您的環境要求的數據進行加密,在休息還是在運輸途中,你可以創建一個init腳本配置您的集群加密交通工作者節點之間,使用AES 128位加密TLS 1.2連接。這個節點間加密功能需要企業計劃。聯係你的磚賬戶代表更多的信息。
分配的工作可以管理非管理用戶權限
2020年7月1 - 9日:3.23版
你現在可以分配到非管理用戶和組可以管理工作許可。這個權限級別允許用戶在工作中管理所有設置,包括分配權限、改變所有者,和改變集群配置(例如,添加庫和修改集群規範)。看到工作訪問控製。