磚運行時的9.0(不支持)
以下版本注釋提供信息數據磚運行9.0和9.0磚運行時的光子,由Apache 3.1.2火花。2021年8月磚發布這些圖片。光子是在公共預覽。
請注意
這些版本注釋可能包括引用功能不可用這個版本的穀歌雲。
新特性和改進
新的API的彙總統計數據集(公共預覽版)
新dbutils.data.summarize命令在磚實用工具允許您啟動一個火花工作,自動計算彙總統計的列火花DataFrame交互式地,然後顯示結果。這個函數可以在Scala和Python。看到數據效用(dbutils.data)。
簡單的外部數據源配置Azure突觸連接器
新externalDataSource選項在Azure突觸分析查詢數據連接器允許您使用一個預定義的外部數據源讀取從Azure突觸數據庫。的externalDataSource選擇刪除的需要控製之前許可要求。
當設置externalDataSource、外部數據源和tempDir選項用於配置臨時存儲必須引用相同的容器中存儲賬戶。
選擇限製會話指定持續時間為亞馬遜紅移連接器
新fs.s3a.assumed.role.session.duration選項查詢亞馬遜與磚紅移連接器允許您選擇設置會話持續時間當訪問臨時S3 bucket的紅移是一個假定的角色。
自動加載程序
優化文件清單
自動加載程序優化提供性能改進和成本節約當嵌套在雲存儲目錄清單,包括AWS S3, Azure數據存儲Gen2湖(ADLS Gen2)和穀歌雲存儲(GCS)。
例如,如果你有文件被上傳/一些/道路/ / MM / DD / YYYY HH /文件名找到這些目錄中的所有文件,自動加載程序用來做一個平行的清單的所有子目錄中,造成365(每天)* 24(每小時)= 8760目錄列表API調用底層存儲為每個目錄。通過接收一個扁平的回應這些存儲係統,自動加載程序減少了API調用的數量存儲係統中的文件的數量除以每個API調用返回的結果的數量(ADLS Gen2 1000 S3, 5000,和1024年gc),大大降低您的雲成本。
優化的圖像數據存儲
自動加載程序現在可以自動檢測所攝取圖像數據和優化其存儲在三角洲表來提高讀寫性能。看到攝取圖像或二進製數據為毫升三角洲湖。
圖片縮略圖的二進製文件(公共預覽版)
圖片binaryFile使用自動加載程序格式加載或保存為三角洲表有附加的注釋,這樣圖像縮略圖顯示表時出現在磚筆記本。有關更多信息,請參見圖片。
DirectoryRename事件使原子處理多個文件
自動加載程序流中創建數據磚在Azure上運行時9.0及以上數據存儲Gen2設置文件湖事件通知包括目錄重命名和聽RenameDirectory事件。你可以使用目錄重命名多個文件出現自動自動加載程序。
SQL
排除列選擇*(公共預覽版)
選擇*現在支持一個除了指定關鍵字,你可以排除頂級列的擴張。例如,選擇*除了(b)從資源描述從一個表模式(一個b,c)擴大到(一個c)。
SQL標量函數(公共預覽版)
創建函數現在支持SQL標量函數。您可以創建標量函數,用一組參數和返回單個標量類型值。SQL函數體可以是任何表達式。例如:
創建函數廣場(x雙)返回雙返回x*x;選擇廣場(2);
有關詳細信息,請參見創建函數。
參考前麵的別名和列從子查詢(公共預覽版)
子查詢的從子句的查詢之前現在可以橫向關鍵字允許他們引用別名和列在前麵從物品。例如:
選擇*從t1,橫向(選擇*從t2在哪裏t1。c1=t2。c1)
的橫向關鍵詞支持內心的,交叉,左(外部)加入。
R的支持
Notebook-scoped R庫(公共預覽版)
Notebook-scoped庫允許您安裝庫和創建一個環境筆記本會話作用域。這些庫不影響其他筆記本上運行相同的集群。可用的庫是司機和工人節點,所以你可以在用戶定義函數中引用它們。看到Notebook-scoped R庫。
在R筆記本警告消息
默認值的警告選擇是現在R筆記本內部設置為1。因此,現在所有的警告都是公開為命令結果的一部分。學習更多有關警告選項,看到選項設置。
避免重做通過指定初始狀態進行結構化流狀態處理
現在,您可以指定一個用戶定義的初始狀態為結構化流狀態處理使用(平)MapGroupsWithState操作符。
三角洲的low-shuffle實現合並成命令現在可以(公共預覽版)
δ合並成可用命令有一個新的實現減少洗牌的修改的行。這個命令的性能得到了很大的提高和幫助保護現有的集群在桌子上,如z值。使低洗牌合並,集spark.databricks.delta.merge.enableLowShuffle來真正的。看到低洗牌合並磚。
庫升級
升級的Python庫:
certifi 2021.5.30 2020.12.5
chardet 3.0.4 4.0.0
Cython 0.29.21 0.29.23
decorator 10/24/11 5.0.6
ipython 7.19.0 7.22.0
joblib 0.17.0 1.0.1
jupyter-client 6.1.7 6.1.12
jupyter-core 4.6.3 4.7.1
1.3.1 1.3.0 kiwisolver從版本
matplotlib 3.2.2 3.4.2
熊貓從1.1.5 1.2.4
皮普從20.2.4 21.0.1
prompt-toolkit 3.0.8 3.0.17
protobuf 3.17.3 3.17.2
ptyprocess 0.6.0 0.7.0
pyarrow 1.0.1 4.0.0
Pygments 2.7.2 2.8.1發布
pyzmq 19.0.2 20.0.0
從2.24.0 2.25.1請求
s3transfer 0.3.6 0.3.7
scikit-learn 0.23.2 0.24.1
scipy 1.5.2 1.6.2
seaborn 0.10.0 0.11.1
setuptools 50.3.1 52.0.0
statsmodels 0.12.0 0.12.2
龍卷風從6.0.4到6.1
virtualenv 20.2.1 20.4.1
輪0.35.1 0.36.2
升級R庫:
矩陣從1.3 3到1.3 - 4
Apache火花
磚9.0運行時包含Apache 3.1.2火花。這個版本包括所有火花修複和改進中磚運行時的8.4(不支持)以及以下額外的bug修複和改進了火花:
(火花- 35886)[SQL] [3.1] PromotePrecision不應覆蓋genCodePromotePrecision不應覆蓋genCode
(火花- 35879)(核心)(SHUFFLE)修複性能回歸collectFetchRequests所致
(火花- 35817)[SQL][3.1]恢複對寬Avro表查詢的性能
(火花- 35841)[SQL]鑄造字符串十進製類型不起作用,如果…
(火花- 35783)[SQL]設置讀取列在任務配置的列表來減少獸人的閱讀數據
(火花- 35576)[SQL][3.1]編輯中的敏感信息設置命令的結果
(火花- 35449)[SQL][3.1]隻有從CaseWhen提取常見的表情如果elseValue設置值
(火花- 35288)[SQL] StaticInvoke應該找到方法沒有具體參數類比賽
(火花- 34794)[SQL]修複λDataFrame嵌套函數的變量名稱問題
(火花- 35278)[SQL]調用應該找到正確的方法參數的數量
(火花- 35226)[SQL]支持refreshKrb5Config選擇JDBC數據源
(火花- 35244)[SQL]調用應該把原始異常
(火花- 35213)[SQL]保持正確的訂購鏈接withField嵌套結構的操作
(火花- 35087)(UI)一些列在表聚合度量的遺囑執行人stage-detail頁麵顯示不正確。
(火花- 35168)[SQL] mapred.reduce。任務應該洗牌。分區不adaptive.coalescePartitions.initialPartitionNum
(火花- 35127)(UI)當我們之間切換不同stage-detail頁麵,輸入項新建的頁麵可能是空白的
(火花- 35142)(PYTHON) (ML)修複錯誤的返回類型
rawPredictionUDF在OneVsRestModel(火花- 35096)[SQL] SchemaPruning應該堅持spark.sql。caseSensitive配置
(火花- 34639)[SQL] [3.1] RelationalGroupedDataset。別名不應該創建UnresolvedAlias
(火花- 35080)[SQL]隻允許等式謂詞的一個子集相關子查詢時聚合
(火花- 35117)(UI)改變進度條突出任務進展的比率
(火花- 35136)刪除初始LiveStage.info null值
(火花- 34834)[網絡]修複TransportResponseHandler潛在網狀的內存泄漏
(火花- 35045)[SQL]添加一個內部選項控製在univocity輸入緩衝區
(火花- 35014)修複PhysicalAggregation模式不重寫可折疊的表達式
(火花- 35019)(PYTHON] [SQL]修複pyspark.sql提示類型不匹配。*
(火花- 34926)[SQL] [3.1] PartitioningUtils.getPathFragment()應該尊重分區值是null
(火花- 34630)(PYTHON)為pyspark添加typehint。版本
(火花- 34963)[SQL]解決嵌套列中提取不區分大小寫的修剪結構體字段從結構體的數組
(火花- 34988)[心][3.1]升級Jetty cve - 2021 - 28165
(火花- 34922)[SQL][3.1]在國會預算辦公室使用相對成本比較函數
(火花- 34970)[SQL][安全][3.1]編輯映射類型選項解釋()的輸出
(火花- 34923)[SQL]元數據輸出更多的計劃應該是空的
(火花- 34949)(核心)防止BlockManager再定位,當執行器是關閉的
(火花- 34939)(核心)拋出獲取故障異常時無法播放狀態映射進行反序列化
(火花- 34909)[SQL]修複conv消極轉換成無符號()
(火花- 34845)(核心)ProcfsMetricsGetter不能返回局部procfs指標
(火花- 34814)[SQL] LikeSimplification應該處理NULL
(火花- 34876)[SQL]填補defaultResult非空集合
(火花- 34829)[SQL]解決高階函數的結果
(火花- 34840)(SHUFFLE)修複病例合並洗牌的腐敗…
(火花- 34833)[SQL] right-padding正確申請相關子查詢
(火花- 34630)(PYTHON] [SQL]添加typehint pyspark.sql.Column.contains
(火花- 34763)[SQL]坳(),美元“<名稱>”和df(“名字”)應當妥善處理引用列名
(火花- 33482)(火花- 34756)[SQL]修複FileScan平等檢查
(火花- 34790)(核心)禁用抓取洗牌塊在批io啟用加密
(火花- 34803)(PYSPARK)通過提高ImportError如果熊貓或pyarrow不能導入
(火花- 34225)(核心)不編碼進一步當一個URI字符串傳遞給addFile或addJar形式
(火花- 34811)(核心)修訂fs.s3a.access。關鍵的秘密和令牌
(火花- 34796)[SQL][3.1]初始化計數器變量的限製代碼生成doProduce ()
(火花- 34128)[SQL]抑製不良TTransportException警告參與節儉- 4805
(火花- 34776)[SQL]嵌套列修剪不應該刪除窗口屬性
(火花- 34087)[3.1][SQL] ExecutionListenerBus解決內存泄漏
(火花- 34772)[SQL] RebaseDateTime loadRebaseRecords應該使用火花代替上下文類加載器
(火花- 34719)[SQL][3.1]正確解決視圖查詢與重複的列名
(火花- 34766)[SQL][3.1]不捕捉maven配置視圖
(火花- 34731)(核心)避免在EventLoggingListener ConcurrentModificationException修訂屬性時
(火花- 34737)[SQL][3.1]輸入浮翻倍
TIMESTAMP_SECONDS(火花- 34749)[SQL][3.1]簡化ResolveCreateNamedStruct
(火花- 34768)[SQL]尊重Univocity中的默認輸入緩衝區的大小
(火花- 34770)[SQL] InMemoryCatalog。如果數據庫不存在tableExists不應該失敗
(火花- 34504)[SQL]避免不必要的解決SQL DDL命令臨時視圖
(火花- 34727)[SQL]解決差異在鑄造浮動時間戳
(火花- 34723)[SQL]正確的參數類型下的子表達式消除舞台
(火花- 34724)[SQL]修複使用getMethod代替getDeclaredMethod解釋評價
(火花- 34713)集團通過與ExtractValue CreateStruct [SQL]修複
(火花- 34697)[SQL]允許描述功能和顯示功能解釋關於| |(字符串連接操作符)
(火花- 34682)[SQL]用PrivateMethodTester代替反射
(火花- 34682)[SQL]修複回歸在CustomShuffleReaderExec規範化錯誤檢查
(火花- 34681)[SQL]修複bug,完全外洗好的散列連接在構建左側不相等的條件
(火花- 34545)[SQL]修複問題valueCompare地幔岩的特征
(火花- 34607)[SQL] [3.1]
Utils.isMemberClass修複一個畸形jdk8u類名稱錯誤(火花- 34596)[SQL]使用跑龍套。在NewInstance.doGenCode getSimpleName避免觸及畸形類的名字
(火花- 34613)[SQL]修複視圖不捕捉禁用提示配置
(火花- 32924)[WEBUI]使時間列在主UI以正確的順序進行排序
(火花- 34482)[SS]正確積極SparkSession StreamExecution.logicalPlan
(火花- 34567)[SQL] CreateTableAsSelect也應該更新指標
(火花- 34599)[SQL]修複問題,插入覆蓋不支持分區列包含DSv2點
(火花- 34577)[SQL]修複/添加列的數據集
描述名稱空間(火花- 34584)[SQL]靜態分區也應該遵循StoreAssignmentPolicy當插入v2表
(火花- 34555)從DataFrame [SQL]解決元數據輸出
(火花- 34534)當使用FetchShuffleBlocks獲取塊修複blockIds秩序
(火花- 34547)[SQL]隻使用元數據列決議作為最後的手段
(火花- 34417)[SQL] org.apache.spark.sql.DataFrameNaFunctions。fillMap未列名有一個點
(火花- 34561)[SQL]修複下降/添加列/ v2的數據集
描述表(火花- 34556)[SQL]檢查重複的靜態分區列應該尊重區分大小寫的相依
(火花- 34392)[SQL]支持ZoneOffset + h: DateTimeUtils毫米。getZoneId
(火花- 34550)[SQL]跳過插圖在推動過濾器蜂巢metastore null值
(火花- 34543)[SQL]尊重
spark.sql.caseSensitive配置解決分區規範在v1集位置(火花- 34436)[SQL]民進黨支持像任何/所有的表情
(火花- 34531)(核心)刪除實驗API PrometheusServlet標簽
(火花- 34497)[SQL]修複內置JDBC連接供應商恢複JVM安全上下文的變化
(火花- 34515)[SQL]修複肺水腫getPartitionsByFilter期間如果插圖包含空值
(火花- 34490)[SQL]分析應該會失敗如果視圖引用一個表
(火花- 34473)[SQL]避免DataFrameReader.schema肺水腫(StructType)
(火花- 34384)(核心)為ResourceProfile api添加缺失的文檔
(火花- 34373)[SQL] HiveThriftServer2 startWithContext可能掛的種族問題
(火花- 20977)(核心)使用一個不是final字段CollectionAccumulator的狀態
(火花- 34421)[SQL]解決臨時與ct在視圖和視圖的作用
(火花- 34431)(核心)隻有負載
hive-site.xml一次(火花- 34405)(核心)修複平均值的timersLabels PrometheusServlet類
(火花- 33438)[SQL]急切地初始化對象定義SQL相依之命令
集- v(火花- 34158)在pom . xml中不正確的url唯一開發者馬泰
(火花- 34346)(核心)[SQL] [3.1] io.file.buffer。spark.buffer設定的大小。將會覆蓋通過加載hive-site大小。xml accidentally may cause perf regression
(火花- 34359)[SQL][3.1]添加一個遺產展示數據庫的配置恢複輸出模式
(火花- 34331)[SQL]加快DS v2坳決議的元數據
(火花- 34318)數據集[SQL] [3.1]。colRegex應與列名和限定符包含換行
(火花- 34326)(核心)[SQL]解決生產中添加火花- 31793根據臨時路徑的長度
(火花- 34319)[SQL] FlatMapCoGroupsInPandas / MapInPandas解決重複的屬性
(火花- 34310)(核心)[SQL]取代地圖和flatMap平
(火花- 34083)[SQL][3.1]使用char、varchar tpcd原始定義科勒姆
(火花- 34233)[SQL][3.1]的字符填充修複肺水腫二進製比較
(火花- 34270)[SS]結合StateStoreMetrics不應該覆蓋StateStoreCustomMetric
(火花- 34144)[SQL]試圖寫LocalDate時拋出異常和即時JDBC關係值
(火花- 34273)(核心)不要再對準BlockManager SparkContext時停止
(火花- 34262)[SQL] [3.1] v1的刷新緩存的數據表
改變表. .集位置(火花- 34275)[心][SQL] [MLLIB]替換過濾器和大小
(火花- 34260)[SQL]修複UnresolvedException創建臨時視圖時兩次
(火花- 33867)[SQL]即時和LocalDate值生成SQL查詢時不處理
(火花- 34193)(核心)TorrentBroadcast塊經理解決退役競賽
(火花- 34221)(WEBUI)確保UI頁麵中如果一個階段失敗,可以正確顯示相應的錯誤消息
(火花- 34236)[SQL]修複v2覆蓋w /零靜態分區提出不能翻譯表達源過濾器:null
(火花- 34212)[SQL]修複錯誤的十進製閱讀從鋪文件
(火花- 34244)[SQL]刪除regexp_extract_all的Scala函數版本
(火花- 34235)[SS] spark.sql。蜂巢作為私人包
(火花- 34232)(核心)修訂SparkListenerEnvironmentUpdate事件日誌
(火花- 34229)[SQL] Avro應該閱讀十進製值的文件模式
(火花- 34223)[SQL]為靜態分區修複肺水腫InsertIntoHadoopFsRelationCommand null
(火花- 34192)[SQL]移動字符填充寫一邊讀一邊和刪除長度檢查
(火花- 34203)[SQL]轉換
零分區的值__HIVE_DEFAULT_PARTITION__在v1內存中目錄(火花- 33726)[SQL]聚合期間解決重複的字段名稱
(火花- 34133)[AVRO]尊重大小寫敏感性在執行Catalyst-to-Avro字段匹配
(火花- 34187)[SS]使用可用的補償範圍獲得投票期間檢查抵消驗證
(火花- 34052)[SQL][3.1]商店創建一個臨時視圖使用SQL文本“緩存表. .當選擇…”
(火花- 34213)[SQL] v1的刷新緩存的數據表
負載數據(火花- 34191)(PYTHON] [SQL]為udf添加輸入過載
(火花- 34200)[SQL]模糊列引用應該考慮屬性的可用性
(火花- 33813)[SQL][3.1]修複問題,JDBC數據源不能治療MS SQL服務器的空間類型
(火花- 34178)[SQL]新節點由MultiInstanceRelation.newInstance複製標簽
(火花- 34005)[心][3.1]更新峰值內存指標對於每個執行者在任務結束
(火花- 34115)(核心)檢查SPARK_TESTING懶惰的val避免減速
(火花- 34153)[SQL][3.1][3.0]刪除未使用的
getRawTable ()從HiveExternalCatalog.alterPartitions ()(火花- 34130)為char [SQL]提高preformace varchar填充和長度與StaticInvoke檢查
(火花- 34027)[SQL][3.1]刷新緩存
改變表. .恢複分區(火花- 34151)[SQL]替換
java.io.File.toURL與java.io.File.toURI.toURL(火花- 34140)[SQL] [3.1] QueryCompilationErrors移動。scala org/apache/spark/sql/errors
(火花- 34080)(毫升)(PYTHON)添加UnivariateFeatureSelector
(火花- 33790)[心][3.1]SingleFileEventLogFileReader減少getFileStatus的rpc調用
(火花- 34118)[心][SQL][3.1]替換過濾器,檢查空虛的存在或原則
(火花- 34114)[SQL]不應該削減對讀字符長度檢查和填充
(火花- 34086)[SQL][3.1]由於RaiseError生成太多代碼,可能失敗codegen長度檢查字符varchar
(火花- 34075)[SQL](核心)隱藏目錄被列為分區推斷
(火花- 34076)[SQL] SQLContext。dropTempTable失敗是否非空的緩存
(火花- 34084)[SQL][3.1]修複汽車更新表的統計數據
改變表. .添加分區(火花- 34090)緩存HadoopDelegationTokenManager [SS]。isServiceEnabled KafkaTokenUtil.needTokenUpdate中使用的結果
(火花- 34069)(核心)任務應該尊重SPARK_JOB_INTERRUPT_ON_CANCEL殺死障礙
(火花- 34091)[SQL]洗牌批取回後應該可以禁用它被啟用
(火花- 34059)[SQL][核心][3.1]使用/ foreach而不是映射確保急切地執行它
(火花- 34002)[SQL] ScalaUDF修複使用的編碼器
(火花- 34060)[SQL][3.1]修複蜂巢表緩存而更新統計數據
改變表. .下降分區(火花- 31952)[SQL]修複錯誤的內存泄漏指標時聚合
(火花- 33591)[SQL][3.1]識別
零在分區規範值(火花- 34055)[SQL][3.1]刷新緩存
改變表. .添加分區(火花- 34039)[SQL] [3.1] ReplaceTable應該緩存失效
(火花- 34003)[SQL]修正規則PaddingAndLengthCheckForCharVarchar和ResolveAggregateFunctions之間的衝突
(火花- 33938)[SQL] [3.1] LikeSimplification優化和任何/所有
(火花- 34021)[R]為凹口提交修複SparkR超鏈接文檔
(火花- 34011)[SQL][3.1][3.0]刷新緩存
改變表. .重命名來分區(火花- 33948)[SQL]修複CodeGen MapObjects誤差。在Scala 2.13 doGenCode方法
(火花- 33635)[SS] KafkaTokenUtil調整的順序檢查。needTokenUpdate補救性能回歸
(火花- 33029)(核心)[WEBUI]解決UI執行人頁麵錯誤標誌著司機排除在外
(火花- 34015)[R]修正輸入時間在新聞出版總署
(火花- 34012)[SQL]相依之時保持一致的行為
spark.sql.legacy.parser.havingWithoutGroupByAsWhere和遷移指南是真的嗎(火花- 33844)[SQL] [3.1] InsertIntoHiveDir命令應該檢查坳名稱
(火花- 33935)[SQL]修複CBO成本函數
(火花- 33100)[SQL]忽視spark-sql分號括號內的評論
(火花- 34000)(核心)修複stageAttemptToNumSpeculativeTasks java.util.NoSuchElementException
(火花- 33992)[SQL]覆蓋transformUpWithNewOutput添加allowInvokingTransformsInAnalyzer
(火花- 33894)[SQL]改變mllib私人case類的可見性,以避免與Scala 2.13運行時編譯錯誤
(火花- 33950)[SQL][3.1][3.0]在v1刷新緩存
改變表. .下降分區(火花- 33980)[SS]無效spark.readStream.schema char、varchar
(火花- 33945)[SQL][3.1]處理隨機種子expr樹組成
(火花- 33398)火花3.0之前修複加載樹模型
(火花- 33963)[SQL]規範化
HiveTableRelationw / o表統計(火花- 33906)[WEBUI]修複bug的UI執行人頁麵由於定義peakMemoryMetrics卡住了
(火花- 33944)[SQL]錯誤日誌的倉庫鑰匙SharedState選項
(火花- 33936)[SQL][3.1]添加版本當連接器的接口被添加
(火花- 33916)(核心)解決後備存儲抵消,提高壓縮編解碼器的測試覆蓋率
(火花- 33899)[SQL][3.1]修複斷言失敗在v1顯示表/視圖
spark_catalog(火花- 33901)[SQL]修複Char、Varchar ddl後顯示出錯
(火花- 33897)[SQL]不能設置選項“十字架”連接方法
(火花- 33907)[SQL][3.1]隻刪除列JsonToStructs如果解析選項是空的
(火花- 33621)(火花- 33784)[SQL][3.1]添加一個方法注入數據源重寫規則
(火花- 33900)[WEBUI]顯示洗牌正確讀取大小/記錄隻有remotebytesread可用
(火花- 33892)[SQL]顯示char、varchar DESC並顯示創建表
(火花- 33895)[SQL] Char、Varchar MetaOperation ThriftServer的失敗
(火花- 33659)[SS]文檔目前DataStreamWriter的行為。toTable API
(火花- 33893)(核心)排除後備阻止經理executorList
(火花- 33277)[PYSPARK] [SQL]使用ContextAwareIterator任務結束後停止消費
(火花- 33889)[SQL][3.1]修複肺水腫
顯示分區V2表上(火花- 33879)[SQL] Char Varchar值失敗w /匹配誤差作為分區列
(火花- 33877)[SQL] SQL參考文檔插入w /列清單
(火花- 33876)[SQL]添加長度檢查閱讀char、varchar從表w /外部位置
(火花- 33846)[SQL]包括StructType.toDDL評論一個嵌套模式
(火花- 33860)[SQL] CatalystTypeConverters。convertToCatalyst匹配特殊的數組值
(火花- 33834)[SQL]驗證ALTER TABLE變化與Char、Varchar列
(火花- 33853)[SQL]解釋CODEGEN和BenchmarkQueryTest不顯示子查詢的代碼
(火花- 33836)[SS] [PYTHON)暴露DataStreamReader。表和DataStreamWriter.toTable
(火花- 33829)[SQL][3.1]重命名v2表應該重新創建緩存
(火花- 33756)[SQL]使BytesToBytesMap MapIterator冪等
(火花- 33850)[SQL]解釋格式化沒有顯示的計劃如果啟用AQE子查詢
(火花- 33841)[心][3.1]解決就業問題從高負載下的合成起就斷斷續續的消失
(火花- 33593)[SQL]與二進製向量讀者有不正確的數據分區的值
(火花- 26341)(WEBUI)公開遺囑執行人內存指標在舞台上層麵,在階段選項卡中
(火花- 33831)jetty 9.4.34 (UI)更新
(火花- 33822)[SQL]使用
CastSupport.cast方法在HashJoin(火花- 33774)(UI)(核心)回到主人”返回500錯誤在獨立的集群中
(火花- 26199)(火花- 31517)[R]修複策略處理…名稱變異
(火花- 33819)[心][3.1]SingleFileEventLogFileReader / RollingEventLogFilesFileReader應該
包私人(火花- 33697)[SQL] RemoveRedundantProjects應該要求列默認排序
(火花- 33752)[SQL][3.1]避免getSimpleMessage AnalysisException反複加分號
(火花- 33788)[SQL][3.1][3.0][2.4]扔NoSuchPartitionsException從HiveExternalCatalog.dropPartitions ()
(火花- 33803)[SQL]排序表的關鍵屬性描述表命令
(火花- 33786)[SQL]存儲水平緩存表名稱改變時應該得到尊重
(火花- 33273)[SQL]解決競態條件的子查詢的執行
(火花- 33653)[SQL] [3.1] DSv2:刷新表應該recache表本身
(火花- 33777)[SQL] V2的排序輸出顯示分區
(火花- 33733)[SQL] PullOutNondeterministic應該檢查並收集確定的領域
(火花- 33764)[SS]使國家商店維修間隔期SQL配置
(火花- 33729)[SQL]緩存刷新時,火花recaching數據時不應該使用緩存的計劃
(火花- 33742)[SQL][3.1]扔PartitionsAlreadyExistException從HiveExternalCatalog.createPartitions ()
(火花- 33706)[SQL]需要完全指定的分區標識符partitionExists ()
(火花- 33740)[SQL] hadoop hive-site配置。xml can overrides pre-existing hadoop ones
(火花- 33692)[SQL]視圖應該使用捕獲的目錄和命名空間查詢功能
(火花- 33669)錯誤的錯誤消息從紗紗sc.stop時應用程序狀態監視客戶機模式
(火花- 32110)[SQL]正常化特殊漂浮在HyperLogLog + +數字
(火花- 33677)[SQL]如果模式包含任何escapeChar跳過LikeSimplification規則
(火花- 33693)[SQL]輕視spark.sql.hive.convertCTAS
(火花- 33641)[SQL]無效新char、varchar類型公共api,產生不正確的結果
(火花- 32680)[SQL]不預處理V2 cta與未解決的查詢
(火花- 33676)[SQL]需要精確匹配的分區模式的規範V2
改變表. .添加/刪除分區(火花- 33670)[SQL]驗證分區提供者蜂巢v1顯示表中擴展
(火花- 33663)[SQL] Uncaching不應該呼籲不存在臨時視圖
(火花- 33667)[SQL]尊重
spark.sql.caseSensitive配置解決分區規範在v1顯示分區(火花- 33652)[SQL] DSv2: DeleteFrom應該刷新緩存
維護更新
看到磚9.0運行時的維護更新。
係統環境
操作係統:Ubuntu 20.04.2 LTS
Java:祖魯8.54.0.21-CA-linux64
Scala:2.12.10
Python:3.8.10
R:4.1.0 (2021-05-18)
三角洲湖1.0.0
安裝Python庫
圖書館 |
版本 |
圖書館 |
版本 |
圖書館 |
版本 |
|---|---|---|---|---|---|
Antergos Linux |
2015.10 (ISO-Rolling) |
appdirs |
1.4.4 |
backcall |
0.2.0 |
boto3 |
1.16.7 |
botocore |
1.19.7 |
certifi |
2020.12.5 |
chardet |
4.0.0 |
周期計 |
0.10.0 |
Cython |
0.29.23 |
dbus-python |
1.2.16 |
裝飾 |
5.0.6 |
distlib |
0.3.2 |
distro-info |
0.23 ubuntu1 |
facets-overview |
1.0.0 |
filelock |
3.0.12 |
idna |
2.10 |
ipykernel |
5.3.4 |
ipython |
7.22.0 |
ipython-genutils |
0.2.0 |
絕地武士 |
0.17.2 |
jmespath |
0.10.0 |
joblib |
1.0.1 |
jupyter-client |
6.1.12 |
jupyter-core |
4.7.1 |
kiwisolver |
1.3.1 |
考拉 |
1.8.1 |
matplotlib |
3.4.2 |
numpy |
1.19.2 |
熊貓 |
1.2.4 |
parso |
0.7.0 |
容易受騙的人 |
0.5.1 |
pexpect |
4.8.0 |
pickleshare |
0.7.5 |
枕頭 |
8.2.0 |
皮普 |
21.0.1 |
情節 |
4.14.3 |
prompt-toolkit |
3.0.17 |
protobuf |
3.17.2 |
psycopg2 |
2.8.5 |
ptyprocess |
0.7.0 |
pyarrow |
4.0.0 |
Pygments |
2.8.1發布 |
PyGObject |
3.36.0 |
pyparsing |
2.4.7 |
python-apt |
2.0.0 + ubuntu0.20.4.5 |
python-dateutil |
2.8.1發布 |
pytz |
2020.5 |
pyzmq |
20.0.0 |
請求 |
2.25.1 |
requests-unixsocket |
0.2.0 |
重試 |
1.3.3 |
s3transfer |
0.3.7 |
scikit-learn |
0.24.1 |
scipy |
1.6.2 |
seaborn |
0.11.1 |
setuptools |
52.0.0 |
六個 |
1.15.0 |
ssh-import-id |
5.10 |
statsmodels |
0.12.2 |
threadpoolctl |
魅惑 |
龍卷風 |
6.1 |
traitlets |
5.0.5 |
unattended-upgrades |
0.1 |
urllib3 |
1.25.11 |
virtualenv |
20.4.1 |
wcwidth |
0.2.5 |
輪 |
0.36.2 |
安裝R庫
R庫的安裝微軟在2021-07-28凹口快照。
圖書館 |
版本 |
圖書館 |
版本 |
圖書館 |
版本 |
|---|---|---|---|---|---|
askpass |
1.1 |
為了 |
0.2.1 |
補丁 |
1.2.1 " |
基地 |
4.1.0 |
base64enc |
0.1 - 3 |
黑洞 |
1.72.0-3 |
位 |
4.0.4 |
bit64 |
你 |
團 |
1.2.1 " |
引導 |
-28 - 1.3 |
釀造 |
1.0 6 |
生動 |
1.1.0 |
掃帚 |
0.7.2 |
callr |
3.5.1 |
脫字符號 |
-86 - 6.0 |
cellranger |
1.1.0 |
時間 |
-56 - 2.3 |
類 |
-19 - 7.3 |
cli |
2.2.0 |
clipr |
是0.7.1 |
集群 |
2.1.2 |
codetools |
-18 - 0.2 |
色彩 |
2.0 0 |
commonmark |
1.7 |
編譯器 |
4.1.0 |
配置 |
0.3 |
covr |
3.5.1 |
cpp11 |
0.2.4 |
蠟筆 |
1.3.4 |
憑證 |
1.3.0 |
相聲 |
1.1.0.1 |
旋度 |
4.3 |
data.table |
1.13.4 |
數據集 |
4.1.0 |
DBI |
1.1.0 |
dbplyr |
2.0.0 |
desc |
1.2.0 |
devtools |
2.3.2 |
diffobj |
0.3.2 |
消化 |
0.6.27 |
dplyr |
1.0.2中 |
DT |
0.16 |
省略 |
0.3.1 |
評估 |
0.14 |
fansi |
0.4.1 |
farver |
2.0.3 |
fastmap |
1.0.1 |
forcats |
0.5.0 |
foreach |
1.5.1 |
外國 |
-81 - 0.8 |
打造 |
0.2.0 |
fs |
1.5.0 |
未來 |
1.21.0 |
泛型 |
0.1.0 |
哥特 |
1.0.2中 |
ggplot2 |
3.3.2 |
“大酒店” |
1.2.0 |
gitcreds |
0.1.1 |
glmnet |
4.0 - 2 |
全局變量 |
0.14.0 |
膠水 |
1.4.2 |
高爾 |
0.2.2 |
圖形 |
4.1.0 |
grDevices |
4.1.0 |
網格 |
4.1.0 |
gridExtra |
2.3 |
gsubfn |
0.7 |
gtable |
0.3.0 |
還 |
2.3.1 |
highr |
0.8 |
hms |
0.5.3 |
htmltools |
0.5.0 |
htmlwidgets |
1.5.3 |
httpuv |
1.5.4 |
httr |
1.4.2 |
hwriter |
1.3.2 |
hwriterPlus |
1.0 - 3 |
ini |
0.3.1 |
不小 |
0.9 9 |
isoband |
0.2.3 |
迭代器 |
1.0.13 |
jsonlite |
1.7.2 |
KernSmooth |
-20 - 2.23 |
knitr |
1.30 |
標簽 |
0.4.2 |
晚些時候 |
1.1.0.1 |
晶格 |
-44 - 0.20 |
熔岩 |
1.6.8.1 |
lazyeval |
0.2.2 |
生命周期 |
0.2.0 |
listenv |
0.8.0 |
lubridate |
1.7.9.2 |
magrittr |
2.0.1 |
減價 |
1.1 |
質量 |
-54 - 7.3 |
矩陣 |
1.3 - 4 |
memoise |
1.1.0 |
方法 |
4.1.0 |
mgcv |
-36 - 1.8 |
mime |
0.9 |
ModelMetrics |
1.2.2.2 |
modelr |
0.1.8 |
孟塞爾 |
0.5.0 |
nlme |
-152 - 3.1 |
nnet |
-16 - 7.3 |
numDeriv |
2016.8 - -1.1 |
openssl |
3 |
平行 |
4.1.0 |
平行 |
1.22.0 |
支柱 |
1.4.7 |
pkgbuild |
1.1.0 |
pkgconfig |
2.0.3 |
pkgload |
1.1.0 |
plogr |
0.2.0 |
plyr |
1.8.6 |
讚美 |
1.0.0 |
prettyunits |
1.1.1 |
pROC |
1.16.2 |
processx |
3.4.5 |
prodlim |
2019.11.13 |
進步 |
1.2.2 |
承諾 |
1.1.1 |
原型 |
1.0.0 |
ps |
1.5.0 |
purrr |
0.3.4 |
r2d3 |
0.2.3 |
R6 |
2.5.0 |
randomForest |
-14 - 4.6 |
rappdirs |
0.3.1 |
rcmdcheck |
1.3.3 |
RColorBrewer |
1.1 - 2 |
Rcpp |
1.0.5 |
readr |
1.4.0 |
readxl |
1.3.1 |
食譜 |
0.1.15 |
複賽 |
1.0.1 |
rematch2 |
2.1.2 |
遙控器 |
2.2.0 |
reprex |
0.3.0 |
reshape2 |
1.4.4 |
雷克斯 |
1.2.0 |
rlang |
0.4.9 |
rmarkdown |
2.6 |
RODBC |
-17 - 1.3 |
roxygen2 |
安裝7.1.1 |
rpart |
-15 - 4.1 |
rprojroot |
2.0.2 |
Rserve |
1.8 8 |
RSQLite |
2.2.1 |
rstudioapi |
0.13 |
rversions |
2.0.2 |
房車 |
0.3.6 |
尺度 |
1.1.1 |
selectr |
0.4 - 2 |
sessioninfo |
1.1.1 |
形狀 |
1.4.5 |
閃亮的 |
1.5.0 |
sourcetools |
0.1.7 |
sparklyr |
1.5.2 |
SparkR |
3.1.1 |
空間 |
-11 - 7.3 |
樣條函數 |
4.1.0 |
sqldf |
-11 - 0.4 |
SQUAREM |
2020.5 |
統計數據 |
4.1.0 |
stats4 |
4.1.0 |
stringi |
1.5.3 |
stringr |
1.4.0 |
生存 |
-11 - 3.2 |
sys |
3.4 |
tcltk |
4.1.0 |
TeachingDemos |
2.10 |
testthat |
3.0.0 |
寵物貓 |
3.0.4 |
tidyr |
1.1.2 |
tidyselect |
1.1.0 |
tidyverse |
1.3.0 |
timeDate |
3043.102 |
tinytex |
0.28 |
工具 |
4.1.0 |
usethis |
2.0.0 |
use utf8 |
1.1.4 |
跑龍套 |
4.1.0 |
uuid |
0.1 - 4 |
vctrs |
0.3.5 |
viridisLite |
0.3.0 |
沃爾多 |
0.2.3 |
晶須 |
0.4 |
withr |
tripwire |
xfun |
0.19 |
xml2 |
1.3.2 |
xopen |
1.0.0 |
xtable |
1.8 - 4 |
yaml |
2.2.1 |
郵政編碼 |
2.1.1 |
安裝了Java和Scala庫(Scala 2.12集群版)
組ID |
工件ID |
版本 |
|---|---|---|
antlr |
antlr |
2.7.7 |
com.amazonaws |
amazon-kinesis-client |
1.12.0 |
com.amazonaws |
aws-java-sdk-autoscaling |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudformation |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudfront |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudhsm |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudsearch |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudtrail |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudwatch |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudwatchmetrics |
1.11.655 |
com.amazonaws |
aws-java-sdk-codedeploy |
1.11.655 |
com.amazonaws |
aws-java-sdk-cognitoidentity |
1.11.655 |
com.amazonaws |
aws-java-sdk-cognitosync |
1.11.655 |
com.amazonaws |
aws-java-sdk-config |
1.11.655 |
com.amazonaws |
aws-java-sdk-core |
1.11.655 |
com.amazonaws |
aws-java-sdk-datapipeline |
1.11.655 |
com.amazonaws |
aws-java-sdk-directconnect |
1.11.655 |
com.amazonaws |
aws-java-sdk-directory |
1.11.655 |
com.amazonaws |
aws-java-sdk-dynamodb |
1.11.655 |
com.amazonaws |
aws-java-sdk-ec2 |
1.11.655 |
com.amazonaws |
aws-java-sdk-ecs |
1.11.655 |
com.amazonaws |
aws-java-sdk-efs |
1.11.655 |
com.amazonaws |
aws-java-sdk-elasticache |
1.11.655 |
com.amazonaws |
aws-java-sdk-elasticbeanstalk |
1.11.655 |
com.amazonaws |
aws-java-sdk-elasticloadbalancing |
1.11.655 |
com.amazonaws |
aws-java-sdk-elastictranscoder |
1.11.655 |
com.amazonaws |
aws-java-sdk-emr |
1.11.655 |
com.amazonaws |
aws-java-sdk-glacier |
1.11.655 |
com.amazonaws |
aws-java-sdk-glue |
1.11.655 |
com.amazonaws |
aws-java-sdk-iam |
1.11.655 |
com.amazonaws |
aws-java-sdk-importexport |
1.11.655 |
com.amazonaws |
aws-java-sdk-kinesis |
1.11.655 |
com.amazonaws |
aws-java-sdk-kms |
1.11.655 |
com.amazonaws |
aws-java-sdk-lambda |
1.11.655 |
com.amazonaws |
aws-java-sdk-logs |
1.11.655 |
com.amazonaws |
aws-java-sdk-machinelearning |
1.11.655 |
com.amazonaws |
aws-java-sdk-marketplacecommerceanalytics |
1.11.655 |
com.amazonaws |
aws-java-sdk-marketplacemeteringservice |
1.11.655 |
com.amazonaws |
aws-java-sdk-opsworks |
1.11.655 |
com.amazonaws |
aws-java-sdk-rds |
1.11.655 |
com.amazonaws |
aws-java-sdk-redshift |
1.11.655 |
com.amazonaws |
aws-java-sdk-route53 |
1.11.655 |
com.amazonaws |
aws-java-sdk-s3 |
1.11.655 |
com.amazonaws |
aws-java-sdk-ses |
1.11.655 |
com.amazonaws |
aws-java-sdk-simpledb |
1.11.655 |
com.amazonaws |
aws-java-sdk-simpleworkflow |
1.11.655 |
com.amazonaws |
aws-java-sdk-sns |
1.11.655 |
com.amazonaws |
aws-java-sdk-sqs |
1.11.655 |
com.amazonaws |
aws-java-sdk-ssm |
1.11.655 |
com.amazonaws |
aws-java-sdk-storagegateway |
1.11.655 |
com.amazonaws |
aws-java-sdk-sts |
1.11.655 |
com.amazonaws |
aws-java-sdk-support |
1.11.655 |
com.amazonaws |
aws-java-sdk-swf-libraries |
1.11.22 |
com.amazonaws |
aws-java-sdk-workspaces |
1.11.655 |
com.amazonaws |
jmespath-java |
1.11.655 |
com.chuusai |
shapeless_2.12 |
2.3.3 |
com.clearspring.analytics |
流 |
2.9.6 |
com.databricks |
Rserve |
1.8 - 3 |
com.databricks |
jets3t |
0.7.1-0 |
com.databricks.scalapb |
compilerplugin_2.12 |
0.4.15-10 |
com.databricks.scalapb |
scalapb-runtime_2.12 |
0.4.15-10 |
com.esotericsoftware |
kryo-shaded |
4.0.2 |
com.esotericsoftware |
minlog |
1.3.0 |
com.fasterxml |
同學 |
1.3.4 |
com.fasterxml.jackson.core |
jackson-annotations |
2.10.0 |
com.fasterxml.jackson.core |
jackson-core |
2.10.0 |
com.fasterxml.jackson.core |
jackson-databind |
2.10.0 |
com.fasterxml.jackson.dataformat |
jackson-dataformat-cbor |
2.10.0 |
com.fasterxml.jackson.datatype |
jackson-datatype-joda |
2.10.0 |
com.fasterxml.jackson.module |
jackson-module-paranamer |
2.10.0 |
com.fasterxml.jackson.module |
jackson-module-scala_2.12 |
2.10.0 |
com.github.ben-manes.caffeine |
咖啡因 |
2.3.4 |
com.github.fommil |
jniloader |
1.1 |
com.github.fommil.netlib |
核心 |
1.1.2 |
com.github.fommil.netlib |
native_ref-java |
1.1 |
com.github.fommil.netlib |
native_ref-java-natives |
1.1 |
com.github.fommil.netlib |
native_system-java |
1.1 |
com.github.fommil.netlib |
native_system-java-natives |
1.1 |
com.github.fommil.netlib |
netlib-native_ref-linux-x86_64-natives |
1.1 |
com.github.fommil.netlib |
netlib-native_system-linux-x86_64-natives |
1.1 |
com.github.joshelser |
dropwizard-metrics-hadoop-metrics2-reporter |
0.1.2 |
com.github.luben |
zstd-jni |
1.4.8-1 |
com.github.wendykierp |
JTransforms |
3.1 |
com.google.code.findbugs |
jsr305 |
3.0.0 |
com.google.code.gson |
gson |
2.2.4 |
com.google.flatbuffers |
flatbuffers-java |
1.9.0 |
com.google.guava |
番石榴 |
15.0 |
com.google.protobuf |
protobuf-java |
2.6.1 |
com.h2database |
h2 |
1.4.195 |
com.helger |
分析器 |
1.1.1 |
com.jcraft |
jsch |
0.1.50 |
com.jolbox |
bonecp |
0.8.0.RELEASE |
com.lihaoyi |
sourcecode_2.12 |
0.1.9 |
com.microsoft.azure |
azure-data-lake-store-sdk |
2.3.9 |
com.microsoft.sqlserver |
mssql-jdbc |
9.2.1.jre8 |
com.ning |
compress-lzf |
1.0.3 |
com.sun.mail |
javax.mail |
1.5.2 |
com.tdunning |
json |
1.8 |
com.thoughtworks.paranamer |
paranamer |
2.8 |
com.trueaccord.lenses |
lenses_2.12 |
0.4.12 |
com.twitter |
chill-java |
0.9.5 |
com.twitter |
chill_2.12 |
0.9.5 |
com.twitter |
util-app_2.12 |
7.1.0 |
com.twitter |
util-core_2.12 |
7.1.0 |
com.twitter |
util-function_2.12 |
7.1.0 |
com.twitter |
util-jvm_2.12 |
7.1.0 |
com.twitter |
util-lint_2.12 |
7.1.0 |
com.twitter |
util-registry_2.12 |
7.1.0 |
com.twitter |
util-stats_2.12 |
7.1.0 |
com.typesafe |
配置 |
1.2.1 " |
com.typesafe.scala-logging |
scala-logging_2.12 |
3.7.2章 |
com.univocity |
univocity-parsers |
2.9.1 |
com.zaxxer |
HikariCP |
3.1.0 |
commons-beanutils |
commons-beanutils |
1.9.4 |
commons-cli |
commons-cli |
1.2 |
commons-codec |
commons-codec |
1.10 |
commons-collections |
commons-collections |
3.2.2 |
commons configuration |
commons configuration |
1.6 |
commons-dbcp |
commons-dbcp |
1.4 |
commons-digester |
commons-digester |
1.8 |
commons-fileupload |
commons-fileupload |
1.3.3 |
commons-httpclient |
commons-httpclient |
3.1 |
commons-io |
commons-io |
2.4 |
commons lang |
commons lang |
2.6 |
通用日誌 |
通用日誌 |
1.1.3 |
commons net |
commons net |
3.1 |
commons-pool |
commons-pool |
1.5.4 |
蜂巢2.7 - 2.3 - __hadoop - |
jets3t - 0.7 |
liball_deps_2.12 |
蜂巢2.7 - 2.3 - __hadoop - |
動物園管理員- 3.4 |
liball_deps_2.12 |
info.ganglia.gmetric4j |
gmetric4j |
1.0.10 |
io.airlift |
aircompressor |
0.10 |
io.delta |
delta-sharing-spark_2.12 |
0.1.0 |
io.dropwizard.metrics |
metrics-core |
以下4.4.1 |
io.dropwizard.metrics |
metrics-graphite |
以下4.4.1 |
io.dropwizard.metrics |
metrics-healthchecks |
以下4.4.1 |
io.dropwizard.metrics |
metrics-jetty9 |
以下4.4.1 |
io.dropwizard.metrics |
metrics-jmx |
以下4.4.1 |
io.dropwizard.metrics |
metrics-json |
以下4.4.1 |
io.dropwizard.metrics |
metrics-jvm |
以下4.4.1 |
io.dropwizard.metrics |
metrics-servlets |
以下4.4.1 |
io.netty |
netty-all |
4.1.51.Final |
io.prometheus |
simpleclient |
0.7.0 |
io.prometheus |
simpleclient_common |
0.7.0 |
io.prometheus |
simpleclient_dropwizard |
0.7.0 |
io.prometheus |
simpleclient_pushgateway |
0.7.0 |
io.prometheus |
simpleclient_servlet |
0.7.0 |
io.prometheus.jmx |
收集器 |
0.12.0 |
jakarta.annotation |
jakarta.annotation-api |
1.3.5 |
jakarta.validation |
jakarta.validation-api |
2.0.2 |
jakarta.ws.rs |
jakarta.ws.rs-api |
2.1.6 |
javax.activation |
激活 |
1.1.1 |
javax.el |
javax.el-api |
2.2.4 |
javax.jdo |
jdo api |
3.0.1 |
javax.servlet |
javax.servlet-api |
3.1.0 |
javax.servlet.jsp |
jsp-api |
2.1 |
javax.transaction |
jta |
1.1 |
javax.transaction |
事務api |
1.1 |
javax.xml.bind |
jaxb-api |
2.2.2 |
javax.xml.stream |
stax-api |
1.0 - 2 |
javolution |
javolution |
5.5.1 |
jline |
jline |
2.14.6 |
joda-time |
joda-time |
2.10.5 |
log4j |
apache-log4j-extras |
1.2.17 |
log4j |
log4j |
1.2.17 |
maven-trees |
蜂巢2.7 - 2.3 - __hadoop - |
liball_deps_2.12 |
net.java.dev.jna |
jna |
5.8.0 |
net.razorvine |
地幔岩 |
4.30 |
net.sf.jpam |
jpam |
1.1 |
net.sf.opencsv |
opencsv |
2.3 |
net.sf.supercsv |
super-csv |
2.2.0 |
net.snowflake |
snowflake-ingest-sdk |
0.9.6 |
net.snowflake |
snowflake-jdbc |
3.13.3 |
net.snowflake |
spark-snowflake_2.12 |
2.9.0-spark_3.1 |
net.sourceforge.f2j |
arpack_combined_all |
0.1 |
org.acplt.remotetea |
remotetea-oncrpc |
1.1.2 |
org.antlr |
ST4 |
4.0.4 |
org.antlr |
antlr-runtime |
3.5.2 |
org.antlr |
antlr4-runtime |
4.8 - 1 |
org.antlr |
stringtemplate |
3.2.1之上 |
org.apache.ant |
螞蟻 |
1.9.2 |
org.apache.ant |
ant-jsch |
1.9.2 |
org.apache.ant |
ant-launcher |
1.9.2 |
org.apache.arrow |
arrow-format |
2.0.0 |
org.apache.arrow |
arrow-memory-core |
2.0.0 |
org.apache.arrow |
arrow-memory-netty |
2.0.0 |
org.apache.arrow |
arrow-vector |
2.0.0 |
org.apache.avro |
avro |
1.8.2 |
org.apache.avro |
avro-ipc |
1.8.2 |
org.apache.avro |
avro-mapred-hadoop2 |
1.8.2 |
org.apache.commons |
commons-compress |
1.20 |
org.apache.commons |
commons-crypto |
1.1.0 |
org.apache.commons |
commons-lang3 |
3.10 |
org.apache.commons |
commons-math3 |
3.4.1 |
org.apache.commons |
commons-text |
1.6 |
org.apache.curator |
curator-client |
2.7.1 |
org.apache.curator |
curator-framework |
2.7.1 |
org.apache.curator |
curator-recipes |
2.7.1 |
org.apache.derby |
德比 |
10.12.1.1 |
org.apache.directory.api |
api-asn1-api |
1.0.0-M20 |
org.apache.directory.api |
api-util |
1.0.0-M20 |
org.apache.directory.server |
apacheds-i18n |
2.0.0-M15 |
org.apache.directory.server |
apacheds-kerberos-codec |
2.0.0-M15 |
org.apache.hadoop |
hadoop-annotations |
第2.7.4 |
org.apache.hadoop |
hadoop-auth |
第2.7.4 |
org.apache.hadoop |
hadoop-client |
第2.7.4 |
org.apache.hadoop |
hadoop-common |
第2.7.4 |
org.apache.hadoop |
hadoop-hdfs |
第2.7.4 |
org.apache.hadoop |
hadoop-mapreduce-client-app |
第2.7.4 |
org.apache.hadoop |
hadoop-mapreduce-client-common |
第2.7.4 |
org.apache.hadoop |
hadoop-mapreduce-client-core |
第2.7.4 |
org.apache.hadoop |
hadoop-mapreduce-client-jobclient |
第2.7.4 |
org.apache.hadoop |
hadoop-mapreduce-client-shuffle |
第2.7.4 |
org.apache.hadoop |
hadoop-yarn-api |
第2.7.4 |
org.apache.hadoop |
hadoop-yarn-client |
第2.7.4 |
org.apache.hadoop |
hadoop-yarn-common |
第2.7.4 |
org.apache.hadoop |
hadoop-yarn-server-common |
第2.7.4 |
org.apache.hive |
hive-beeline |
2.3.7 |
org.apache.hive |
hive-cli |
2.3.7 |
org.apache.hive |
hive-jdbc |
2.3.7 |
org.apache.hive |
hive-llap-client |
2.3.7 |
org.apache.hive |
hive-llap-common |
2.3.7 |
org.apache.hive |
hive-serde |
2.3.7 |
org.apache.hive |
hive-shims |
2.3.7 |
org.apache.hive |
hive-storage-api |
2.7.2 |
org.apache.hive.shims |
蜂巢0.23 -墊片 |
2.3.7 |
org.apache.hive.shims |
hive-shims-common |
2.3.7 |
org.apache.hive.shims |
hive-shims-scheduler |
2.3.7 |
org.apache.htrace |
htrace-core |
3.1.0-incubating |
org.apache.httpcomponents |
httpclient |
4.5.6 |
org.apache.httpcomponents |
httpcore |
4.4.12 |
org.apache.ivy |
艾薇 |
測試盒框 |
org.apache.mesos |
mesos-shaded-protobuf |
1.4.0 |
org.apache.orc |
orc-core |
1.5.12 |
org.apache.orc |
orc-mapreduce |
1.5.12 |
org.apache.orc |
orc-shims |
1.5.12 |
org.apache.parquet |
parquet-column |
1.10.1-databricks9 |
org.apache.parquet |
parquet-common |
1.10.1-databricks9 |
org.apache.parquet |
parquet-encoding |
1.10.1-databricks9 |
org.apache.parquet |
parquet-format |
測試盒框 |
org.apache.parquet |
parquet-hadoop |
1.10.1-databricks9 |
org.apache.parquet |
parquet-jackson |
1.10.1-databricks9 |
org.apache.thrift |
libfb303 |
0.9.3 |
org.apache.thrift |
libthrift |
0.12.0 |
org.apache.xbean |
xbean-asm7-shaded |
4.15 |
org.apache.yetus |
audience-annotations |
0.5.0 |
org.apache.zookeeper |
動物園管理員 |
3.4.14 |
org.codehaus.jackson |
jackson-core-asl |
1.9.13 |
org.codehaus.jackson |
jackson-jaxrs |
1.9.13 |
org.codehaus.jackson |
jackson-mapper-asl |
1.9.13 |
org.codehaus.jackson |
jackson-xc |
1.9.13 |
org.codehaus.janino |
commons-compiler |
3.0.16 |
org.codehaus.janino |
janino |
3.0.16 |
org.datanucleus |
datanucleus-api-jdo |
4.2.4 |
org.datanucleus |
datanucleus-core |
4.1.17 |
org.datanucleus |
datanucleus-rdbms |
4.1.19 |
org.datanucleus |
javax.jdo |
3.2.0-m3 |
org.eclipse.jetty |
jetty-client |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-continuation |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-http |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-io |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-jndi |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-plus |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-proxy |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-security |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty服務器 |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty servlet |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-servlets |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-util |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-util-ajax |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-webapp |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-xml |
9.4.36.v20210114 |
org.fusesource.leveldbjni |
leveldbjni-all |
1.8 |
org.glassfish.hk2 |
hk2-api |
2.6.1 |
org.glassfish.hk2 |
hk2-locator |
2.6.1 |
org.glassfish.hk2 |
hk2-utils |
2.6.1 |
org.glassfish.hk2 |
osgi-resource-locator |
1.0.3 |
org.glassfish.hk2.external |
aopalliance-repackaged |
2.6.1 |
org.glassfish.hk2.external |
jakarta.inject |
2.6.1 |
org.glassfish.jersey.containers |
jersey-container-servlet |
2.30 |
org.glassfish.jersey.containers |
jersey-container-servlet-core |
2.30 |
org.glassfish.jersey.core |
jersey客戶端 |
2.30 |
org.glassfish.jersey.core |
jersey-common |
2.30 |
org.glassfish.jersey.core |
jersey-server |
2.30 |
org.glassfish.jersey.inject |
jersey-hk2 |
2.30 |
org.glassfish.jersey.media |
jersey-media-jaxb |
2.30 |
org.hibernate.validator |
hibernate驗證框架 |
6.1.0.Final |
org.javassist |
javassist |
3.25.0-GA |
org.jboss.logging |
jboss-logging |
3.3.2.Final |
org.jdbi |
jdbi |
2.63.1 |
org.joda |
joda-convert |
1.7 |
org.jodd |
jodd-core |
3.5.2 |
org.json4s |
json4s-ast_2.12 |
3.7.0-M5 |
org.json4s |
json4s-core_2.12 |
3.7.0-M5 |
org.json4s |
json4s-jackson_2.12 |
3.7.0-M5 |
org.json4s |
json4s-scalap_2.12 |
3.7.0-M5 |
org.lz4 |
lz4-java |
1.7.1上 |
org.mariadb.jdbc |
mariadb-java-client |
2.2.5 |
org.objenesis |
objenesis |
2.5.1 |
org.postgresql |
postgresql |
42.1.4 |
org.roaringbitmap |
RoaringBitmap |
0.9.14 |
org.roaringbitmap |
墊片 |
0.9.14 |
org.rocksdb |
rocksdbjni |
6.20.3 |
org.rosuda.REngine |
REngine |
魅惑 |
org.scala-lang |
scala-compiler_2.12 |
2.12.10 |
org.scala-lang |
scala-library_2.12 |
2.12.10 |
org.scala-lang |
scala-reflect_2.12 |
2.12.10 |
org.scala-lang.modules |
scala-collection-compat_2.12 |
2.1.1 |
org.scala-lang.modules |
scala-parser-combinators_2.12 |
1.1.2 |
org.scala-lang.modules |
scala-xml_2.12 |
1.2.0 |
org.scala-sbt |
測試界麵 |
1.0 |
org.scalacheck |
scalacheck_2.12 |
1.14.2 |
org.scalactic |
scalactic_2.12 |
3.0.8 |
org.scalanlp |
breeze-macros_2.12 |
1.0 |
org.scalanlp |
breeze_2.12 |
1.0 |
org.scalatest |
scalatest_2.12 |
3.0.8 |
org.slf4j |
jcl-over-slf4j |
1.7.30 |
org.slf4j |
jul-to-slf4j |
1.7.30 |
org.slf4j |
slf4j-api |
1.7.30 |
org.slf4j |
slf4j-log4j12 |
1.7.30 |
org.spark-project.spark |
未使用的 |
1.0.0 |
org.springframework |
spring核心 |
4.1.4.RELEASE |
org.springframework |
spring測試 |
4.1.4.RELEASE |
org.threeten |
threeten-extra |
1.5.0 |
org.tukaani |
xz |
1.5 |
org.typelevel |
algebra_2.12 |
2.0.0-M2 |
org.typelevel |
cats-kernel_2.12 |
2.0.0-M4 |
org.typelevel |
machinist_2.12 |
0.6.8 |
org.typelevel |
macro-compat_2.12 |
1.1.1 |
org.typelevel |
spire-macros_2.12 |
0.17.0-M1 |
org.typelevel |
spire-Beplay体育安卓版本platform_2.12 |
0.17.0-M1 |
org.typelevel |
spire-util_2.12 |
0.17.0-M1 |
org.typelevel |
spire_2.12 |
0.17.0-M1 |
org.wildfly.openssl |
wildfly-openssl |
1.0.7.Final |
org.xerial |
sqlite-jdbc |
3.8.11.2 |
org.xerial.snappy |
snappy-java |
1.1.8.2 |
org.yaml |
snakeyaml |
1.24 |
奧羅 |
奧羅 |
2.0.8 |
pl.edu.icm |
JLargeArrays |
1.5 |
software.amazon.ion |
ion-java |
1.0.2中 |
stax |
stax-api |
1.0.1 |
xmlenc |
xmlenc |
0.52 |