工作區庫

作為一個本地存儲庫工作區庫創建cluster-installed庫。工作區庫可能是您的組織創建的自定義代碼,也可能是一個特定版本的開源庫,您的組織已經標準化。

您必須安裝一個工作區圖書館集群上之前,可以用在筆記本或工作。

工作區圖書館共享文件夾可用於所有用戶在一個工作區,在用戶空間庫文件夾隻提供給用戶。

創建工作區庫

  1. 右鍵單擊工作區文件夾你想存儲庫。

  2. 選擇創建>庫

    創建庫

    創建庫對話框。

    庫選項
  3. 選擇庫源並遵循適當的程序:

上傳一個Jar, Python雞蛋,或Python輪

請注意

安裝Python雞蛋是棄用和將被刪除在未來磚運行時版本。

  1. 在庫源按鈕列表中,選擇上傳

  2. 選擇Jar,Python蛋,或Python Whl

  3. 可選輸入一個庫名稱。

  4. 拖你的罐子,雞蛋、Whl到郵箱或點擊郵箱並導航到一個文件中。文件被上傳到dbfs: / FileStore / jar

  5. 點擊創建。圖書館狀態屏幕顯示。

  6. (可選)在一個集群上安裝該庫

引用一個上傳的jar, Python雞蛋,或Python輪

如果你已經上傳一個jar、雞蛋、或輪對象存儲一個工作區圖書館你可以參考它。

你可以選擇一個庫DBFS和一個存儲在gc。

  1. 選擇DBFS / gc在庫源按鈕列表中。

  2. 選擇Jar,Python蛋,或Python Whl

  3. 可選輸入一個庫名稱。

  4. 指定DBFS或GCS路徑庫。

  5. 點擊創建。圖書館狀態屏幕顯示。

  6. (可選)在一個集群上安裝該庫

PyPI包

  1. 在庫源按鈕列表中,選擇PyPI

  2. 輸入一個PyPI包名稱。安裝一個特定版本的庫,使用這種格式的庫:<圖書館> = = <版本>。例如,scikit-learn = = 0.19.1

    請注意

    工作磚建議您指定一個庫的版本以確保可再生的環境。如果指定的庫版本不完全,磚使用最新的匹配版本。這意味著不同的運行相同的作業可能使用不同的庫版本發布新版本。指定庫版本阻止新,打破改變圖書館打破你們的工作。

  3. 索引中的URL字段中,輸入PyPI指數URL,這是可選的。

  4. 點擊創建。圖書館狀態屏幕顯示。

  5. (可選)在一個集群上安裝該庫

Maven或火花包

  1. 在庫源按鈕列表中,選擇Maven

  2. 指定一個Maven坐標。做下列之一:

    • 在協調領域,進入圖書館的Maven協調安裝。Maven坐標形式groupId: artifactId:版本;例如,com.databricks: spark-avro_2.10:1.0.0

    • 如果你不知道確切的坐標,名稱並單擊進入圖書館搜索包。匹配的軟件包列表顯示。顯示一個包的詳細信息,單擊其名稱。你可以包的名字、組織和評級。您還可以編寫一個查詢篩選結果的搜索欄。結果自動刷新。

      1. 選擇Maven中央火花包在左上角下拉列表。

      2. 可選擇的包版本發布列。

      3. 點擊+選擇旁邊一個包。協調字段填寫與所選包和版本。

  3. 在存儲庫中,可以選擇輸入一個Maven存儲庫URL。

    請注意

    內部不支持Maven存儲庫。

  4. 除外責任字段中,選擇提供groupIdartifactId你想排除的依賴性;例如,log4j: log4j

  5. 點擊創建。圖書館狀態屏幕顯示。

  6. (可選)在一個集群上安裝該庫

凹口包

  1. 在庫源按鈕列表中,選擇凹口

  2. 在Package字段中,輸入包的名稱。

  3. 在存儲庫中,有選擇地進入凹口存儲庫URL。

  4. 點擊創建。圖書館細節屏幕顯示。

  5. (可選)在一個集群上安裝該庫

請注意

凹口包隻能在磚運行時9.0及以上。

請注意

凹口鏡服務庫的最新版本。作為一個結果,你可能最終與不同版本的R包如果你把圖書館在不同的時間不同的集群。學習如何管理和修複R包版本在磚上,看到的知識庫

查看工作區圖書館細節

  1. 去工作區文件夾包含圖書館。

  2. 單擊庫名稱。

圖書館頁麵顯示運行集群和細節安裝狀態的圖書館。如果圖書館安裝,頁麵包含的鏈接包主機。如果圖書館上傳,上傳的頁麵顯示一個鏈接文件包。

移動一個工作區圖書館

  1. 去工作區文件夾包含圖書館。

  2. 單擊下拉箭頭菜單下拉右邊的圖書館名稱並選擇移動。瀏覽器顯示的文件夾。

  3. 單擊目標文件夾。

  4. 點擊選擇

  5. 點擊確認和移動

刪除一個工作區圖書館

重要的

刪除一個工作區庫之前,你應該卸載所有集群。

刪除一個工作區庫:

  1. 把圖書館搬到垃圾文件夾。

  2. 在垃圾文件夾中永久刪除圖書館或倒垃圾文件夾。