磚運行時10.4 LTS
以下版本注釋提供信息數據磚運行10.4和10.4磚運行時的光子,由Apache火花3.2.1之上。光子是在公共預覽。2022年3月磚發布這些圖片。
新特性和改進
冰山三角洲表轉換器(公共預覽版)
轉換為現在支持將冰山表轉換為δ表。它通過使用冰山本地元數據和文件清單。看到冰山表轉換為三角洲表。
汽車壓實回滾現在默認啟用
這個版本改善行為三角洲湖寫道,提交時並發汽車壓實事務。在這個版本之前,這樣經常會放棄寫道,由於並發修改一個表。寫到現在會成功,即使有並發汽車壓實的事務。
低洗牌合並現在是默認啟用
的合並成
命令現在總是使用新的low-shuffle實現。這種行為改善的性能合並成
對於大多數工作負載命令明顯。以前使用的配置設置來啟用這個特性被移除。看到低洗牌合並磚。
插入順序標記現在保存更新
年代和刪除
年代
的更新
和刪除
命令保存現有集群信息(包括z值)更新或刪除的文件。這種行為是一種最優的方法,這種方法並不適用於情況下文件太小,在更新或刪除這些文件相結合。
HikariCP現在默認蜂巢metastore連接池
HikariCP帶來許多穩定性改善蜂巢metastore訪問同時保持較少的連接相比BoneCP連接池實現。HikariCP默認啟用任何磚集群運行時使用磚蜂巢metastore(例如,當spark.sql.hive.metastore.jars
沒有設置)。你也可以顯式地切換到其他連接池的實現,例如BoneCP,通過設置spark.databricks.hive.metastore.client.pool.type
。
Azure突觸連接器現在允許的最大數量允許拒絕行集
的Azure突觸連接器現在支持一個maxErrorsDataFrame選項。這個更新允許您配置的最大允許拒絕行數在加載操作取消了之前的讀和寫。所有拒絕行被忽略。例如,如果兩個的記錄有錯誤,隻有8條記錄處理。
直接映射到這個選項REJECT_VALUE
選擇創建外部表
在混合基和聲明MAXERRORS
Azure突觸連接的選項複製
命令。
默認情況下,maxErrors
值設置為0
:所有記錄將是有效的。
異步檢查點是現在通常可用狀態
您可以啟用異步狀態檢查點狀態流與大型國有更新查詢。這可以減少端到端micro-batch延遲。這個功能現在投入使用。看到啟用異步狀態檢查點結構化流。
參數默認值現在可以指定SQL用戶定義函數
當您創建一個SQL用戶定義函數(SQL UDF),您可以指定SQL UDF的默認表達式的參數。然後可以調用SQL UDF沒有提供這些參數,參數和磚將填寫這些參數的默認值。看到創建函數(SQL)。
高並發性集群的新工作目錄
在高並發性集群表訪問控製或證書啟用透傳,現在筆記本的當前工作目錄是用戶的主目錄。以前,工作目錄/磚/驅動程序
。
身份在三角洲表列支持現在投入使用
三角洲湖現在支持標識列。當你寫δ表定義一個標識列,你不提供這一列的值,三角洲現在自動分配一個獨特的和統計上增加或減少的值。看到創建表(使用)。
庫升級
升級的Python庫:
filelock 3.4.2 3.6.0
升級R庫:
啤酒從1.0 6到1.0 7
掃帚0.7.11 0.7.12
cli 3.1.0 3.2.0
clipr是0.7.1 0.8.0
色彩從2.0 - 2到2.0 - 3
蠟筆1.4.2 1.5.0
dplyr 1.0.7 1.0.8
從1.2.0 dtplyr 1.2.1
評估從0.14到0.15
foreach 1.5.1 1.5.2
未來1.23.0 1.24.0
泛型0.1.1 0.1.2
膠水1.6.0 1.6.1
高爾半島0.2.2 1.0.0
迭代器從1.0.13 1.0.14
jsonlite 1.7.3 1.8.0
magrittr 2.0.2 2.0.1
mgcv從1.8 -38 1.8 -39
支柱1.6.4 1.7.0
randomForest從-14年4.6到4.7 - 1
readr 2.1.1和2.1.2
食譜0.1.17 0.2.0
rlang 0.4.12 1.0.1
4.1.16 rpart從-15年的4.1
RSQLite 2.2.9 2.2.10
sparklyr 1.7.4 1.7.5
testthat 3.1.1和3.1.2
tidyr 1.1.4 1.2.0
tidyselect 1.1.1 1.1.2
tinytex從0.36到0.37
yaml 2.2.1 2.3.5
升級Java庫:
io.delta.delta-sharing-spark_2.12 0.3.0 0.4.0
Apache火花
磚10.4運行時包含Apache火花3.2.1之上。這個版本包括所有火花修複和改進中磚運行時的10.3(不支持)以及以下額外的bug修複和改進了火花:
(火花- 38322)[SQL]支持查詢階段顯示運行時統計數據格式化的解釋模式
(火花- 38162)[SQL]優化一行計劃在正常和AQE優化器
(火花- 38229)[SQL]不應該檢查臨時/外部/ ifNotExists visitReplaceTable當解析器
(火花- 34183)[SS]數據源V2:需要分配和排序micro-batch執行
(火花- 37932)[SQL]等來解決應用DeduplicateRelations之前缺少的屬性
(火花- 37904)[SQL]改善RebalancePartitions優化規則
(火花- 38236)[SQL][3.2][3.1]檢查表的位置是絕對的“新路徑(locationUri)。在創建/ alter table isAbsolute”
(火花- 38035)[SQL]添加內置的碼頭工人測試JDBC方言
(火花- 38042)[SQL]確保ScalaReflection。數據類型For works on aliased array types
(火花- 38273)[SQL]
decodeUnsafeRows
迭代器應該關閉底層輸入流(火花- 38311)[SQL]修複DynamicPartitionPruning / BucketedReadSuite ExpressionInfoSuite ANSI模式下
(火花- 38305)(核心)顯式地檢查源存在於解包()調用FileUtil方法之前
(火花- 38275)[SS]包括writeBatch的內存使用的總內存使用量RocksDB存儲狀態
(火花- 38132)[SQL]刪除
NotPropagation
規則(火花- 38286)[SQL]聯盟的maxRows maxRowsPerPartition可能溢出
(火花- 38306)[SQL]修複ExplainSuite, StatisticsCollectionSuite和StringFunctionsSuite ANSI模式
(火花- 38281)[SQL][測試]修複下AnalysisSuite ANSI模式
(火花- 38307)[SQL][測試]修複ExpressionTypeCheckingSuite和CollectionExpressionsSuite ANSI模式
(火花- 38300)[SQL]使用
ByteStreams.toByteArray
為了簡化fileToString
和resourceToBytes
在catalyst.util(火花- 38304)[SQL]英語教學()方法應該返回null如果指數是零ANSI模式下
(火花- 38271)PoissonSampler可能比MaxRows輸出更多的行
(火花- 38297)(PYTHON)顯式地投在DataFrame返回值。在POS to_numpy
(火花- 38295)[SQL][測試]修複下ArithmeticExpressionSuite ANSI模式
(火花- 38290)[SQL]修複JsonSuite和ParquetIOSuite ANSI模式
(火花- 38299)[SQL]清理廢棄使用
StringBuilder.newBuilder
(火花- 38060)[SQL]尊重allowNonNumericNumbers在JSON解析引用南和無窮值讀者
(火花- 38276)[SQL]添加批準tpcd ANSI模式下計劃
(火花- 38206)[SS]忽視nullability stream-stream比較連接鍵的數據類型上加入
(火花- 37290)[SQL]——指數規劃時間的不確定性函數
(火花- 38232)[SQL]解釋格式化不收集AQE子查詢在查詢階段
(火花- 38283)[SQL]測試無效datetime ANSI模式下解析
(火花- 38140)[SQL] Desc列統計(最小,最大)時間戳類型不一致的值由於時區的差異
(火花- 38227)[SQL] [SS]應用嚴格nullability嵌套列窗口/會話窗口
(火花- 38221)[SQL]急切地遍曆groupingExpressions當移動複雜表達式分組的總節點
(火花- 38216)[SQL]早期失敗時,如果所有的列分區列創建一個蜂巢表
(火花- 38214)[SS]不需要過濾窗口當windowDuration slideDuration的倍數
(火花- 38182)[SQL]修複NoSuchElementException如果推過濾不包含任何引用
(火花- 38159)[SQL]添加一個新的FileSourceMetadataAttribute隱藏文件的元數據
(火花- 38123)[SQL]統一使用
數據類型
作為targetType
的QueryExecutionErrors # castingCauseOverflowError
(火花- 38118)[SQL] Func(錯誤的數據類型)的條款應該把數據不匹配錯誤
(火花- 35173)[SQL] [PYTHON)添加多個列添加支持
(火花- 38177)[SQL]修複錯誤transformExpressions優化器
(火花- 38228)[SQL]遺留存儲作業不應該在錯誤失敗ANSI模式
(火花- 38173)[SQL]引用列無法正確認識到當quotedRegexColumnNa…
(火花- 38130)[SQL]刪除array_sort公開條目定貨
(火花- 38199)[SQL]刪除未使用的
數據類型
在定義中指定IntervalColumnAccessor
(火花- 38203)[SQL]修複SQLInsertTestSuite和SchemaPruningSuite ANSI模式
(火花- 38163)[SQL]保存類的錯誤
SparkThrowable
而構造函數的構建工具(火花- 38157)[SQL]顯式地設置ANSI錯誤在測試timestampNTZ /時間戳。sql和SQLQueryTestSuite匹配預期的金色的結果
(火花- 38069)[SQL] [SS]改善時間窗口的計算
(火花- 38164)[SQL]新SQL函數:try_subtract try_multiply
(火花- 38176)[SQL] ANSI模式:允許隱式鑄造其他簡單類型字符串
(火花- 37498)(PYTHON)為test_reuse_worker_of_parallelize_range添加最終
(火花- 38198)[SQL][3.2]修複QueryExecution.debug #去整理使用傳入maxFields explainMode CodegenMode時
(火花- 38131)[SQL]使用錯誤類隻能麵向用戶的異常
(火花- 37652)[SQL]添加測試優化傾斜加入聯盟
(火花- 37585)[SQL]更新InputMetric DataSourceRDD TaskCompletionListener
(火花- 38113)[SQL]使用錯誤類執行錯誤的旋轉
(火花- 38178)[SS]正確的邏輯來衡量RocksDB的內存使用
(火花- 37969)[SQL] HiveFileFormat應該檢查字段名
(火花- 37652)恢複“[SQL]添加測試優化傾斜加入通過聯盟”
(火花- 38124)[SQL] [SS]介紹StatefulOpClusteredDistribution和適用於stream-stream加入
(火花- 38030)[SQL]規範化不應移除nullability AttributeReference數據類型
(火花- 37907)[SQL] ConstantFolding InvokeLike支持
(火花- 37891)(核心)添加禁用scala.concurrent.ExecutionContext.Implicits.global scalastyle檢查
(火花- 38150)[SQL]更新RelationConversions的評論
(火花- 37943)[SQL]使用錯誤類編譯錯誤的分組
(火花- 37652)[SQL]添加測試優化傾斜加入聯盟
(火花- 38056)[Web UI][3.2]修複問題結構化流媒體服務器在使用並且曆史上不工作
(火花- 38144)(核心)刪除未使用的
spark.storage.safetyFraction
配置(火花- 38120)[SQL] HiveExternalCatalog修複。listPartitions當分區列名字是大寫,點在分區的值
(火花- 38122)[醫生]DocSearch更新應用程序的關鍵
(火花- 37479)[SQL]遷移刪除默認名稱空間使用V2命令
(火花- 35703)[SQL]桶加入和移除HashClusteredDistribution放鬆約束
(火花- 37983)[SQL]退出gg構建時間指標從總排序
(火花- 37915)[SQL]結合工會如果有一個項目
(火花- 38105)[SQL]使用錯誤類解析錯誤的連接
(火花- 38073)(PYTHON)更新atexit函數來避免與後期綁定問題
(火花- 37941)[SQL]使用錯誤類鑄件的編譯錯誤
(火花- 37937)[SQL]使用錯誤類解析錯誤的橫向連接
(火花- 38100)[SQL]刪除未使用的私有方法
小數
(火花- 37987)[SS]修複測試StreamingAggregationSuite片狀。當重新啟動查詢模式的改變狀態
(火花- 38003)[SQL] LookupFunctions規則應該隻從標量函數注冊中心查找功能
(火花- 38075)[SQL]修複
hasNext
在HiveScriptTransformationExec
流程輸出迭代器(火花- 37965)[SQL]刪除現有讀/寫數據時檢查字段名獸人
(火花- 37922)[SQL]結合到一個演員如果我們可以安全地up-cast又甩了兩次鉤(dbr -分公司- 10. x)
(火花- 37675)[火花- 37793]防止覆蓋推動洗牌洗牌一旦完成合並文件
(火花- 38011)[SQL] ParquetFileFormat去掉重複的和無用的配置
(火花- 37929)[SQL]支持級聯模式
dropNamespace
API(火花- 37931)[SQL]如果需要引用的列名稱
(火花- 37990)[SQL]支持TimestampNTZ RowToColumnConverter
(火花- 38001)[SQL]取代錯誤的類不支持的特性有關
UNSUPPORTED_FEATURE
(火花- 37839)[SQL] DS V2支持部分總下推
AVG
(火花- 37878)[SQL]顯示創建表遷移到默認使用v2命令
(火花- 37731)[SQL]重構和清理函數查詢分析器
(火花- 37979)[SQL]開關類在AES函數更通用的錯誤
(火花- 37867)[SQL]編譯聚合函數的內置JDBC方言
(火花- 38028)[SQL]暴露箭頭從ArrowColumnVector向量
(火花- 30062)[SQL]立即聲明添加到DB2方言截斷的實現
(火花- 36649)[SQL]支持
Trigger.AvailableNow
在卡夫卡的數據源(火花- 38018)[SQL] ColumnVectorUtils修複。正確處理CalendarIntervalType填充
(火花- 38023)(核心)
ExecutorMonitor.onExecutorRemoved
應該處理ExecutorDecommission
為完成(火花- 38019)(核心)使
ExecutorMonitor.timedOutExecutors
確定的(火花- 37957)[SQL]正確傳遞V2標量函數的確定性信號
(火花- 37985)[SQL]修複片狀測試火花- 37578
(火花- 37986)[SQL]支持TimestampNTZ基數排序
(火花- 37967)[SQL]文字。創建支持ObjectType
(火花- 37827)[SQL]把一些內置V1Table表屬性。propertie適應V2命令
(火花- 37963)[SQL]需要更新分區URI在InMemoryCatalog重命名表後
(火花- 35442)[SQL]支持傳播空關係通過聚合/聯盟
(火花- 37933)[SQL]改變V2ScanRelationPushDown壓低的遍曆方法規則
(火花- 37917)[SQL]壓低限製1右邊的左邊半/反加入如果聯接條件是空的
(火花- 37959)(毫升)修複KMeans & BiKMeans UT的檢查標準
(火花- 37906)[SQL] spark-sql不應該通過最後的評論後端
(火花- 37627)在BucketTransform [SQL]添加排序的列
係統環境
操作係統:Ubuntu 20.04.4 LTS
Java:祖魯8.56.0.21-CA-linux64
Scala:2.12.14
Python:3.8.10
R:4.1.2
三角洲湖:1.1.0
安裝Python庫
圖書館 |
版本 |
圖書館 |
版本 |
圖書館 |
版本 |
---|---|---|---|---|---|
Antergos Linux |
2015.10 (ISO-Rolling) |
appdirs |
1.4.4 |
argon2-cffi |
20.1.0 |
async-generator |
1.10 |
attrs |
20.3.0 |
backcall |
0.2.0 |
bidict |
0.21.4 |
漂白劑 |
3.3.0 |
boto3 |
1.16.7 |
botocore |
1.19.7 |
certifi |
2020.12.5 |
cffi |
1.14.5 |
chardet |
4.0.0 |
周期計 |
0.10.0 |
Cython |
0.29.23 |
dbus-python |
1.2.16 |
裝飾 |
5.0.6 |
defusedxml |
是0.7.1 |
distlib |
0.3.4 |
distro-info |
0.23 ubuntu1 |
entrypoints |
0.3 |
facets-overview |
1.0.0 |
filelock |
3.6.0 |
idna |
2.10 |
ipykernel |
5.3.4 |
ipython |
7.22.0 |
ipython-genutils |
0.2.0 |
ipywidgets |
7.6.3 |
絕地武士 |
0.17.2 |
Jinja2 |
14 |
jmespath |
0.10.0 |
joblib |
1.0.1 |
jsonschema |
3.2.0 |
jupyter-client |
6.1.12 |
jupyter-core |
4.7.1 |
jupyterlab-pygments |
0.1.2 |
jupyterlab-widgets |
1.0.0 |
kiwisolver |
1.3.1 |
考拉 |
1.8.2 |
MarkupSafe |
2.0.1 |
matplotlib |
3.4.2 |
使走調 |
0.8.4 |
nbclient |
0.5.3 |
nbconvert |
6.0.7 |
nbformat |
5.1.3 |
nest-asyncio |
1.5.1 |
筆記本 |
6.3.0 |
numpy |
1.20.1 |
包裝 |
20.9 |
熊貓 |
1.2.4 |
pandocfilters |
3 |
parso |
0.7.0 |
容易受騙的人 |
0.5.1 |
pexpect |
4.8.0 |
pickleshare |
0.7.5 |
枕頭 |
8.2.0 |
皮普 |
21.0.1 |
情節 |
發送的 |
prometheus-client |
0.10.1 |
prompt-toolkit |
3.0.17 |
protobuf |
3.17.2 |
psycopg2 |
2.8.5 |
ptyprocess |
0.7.0 |
pyarrow |
4.0.0 |
pycparser |
2.20 |
Pygments |
2.8.1發布 |
PyGObject |
3.36.0 |
pyparsing |
2.4.7 |
pyrsistent |
0.17.3 |
python-apt |
2.0.0 + ubuntu0.20.4.7 |
python-dateutil |
2.8.1發布 |
python-engineio |
4.3.0 |
python-socketio |
5.4.1之前 |
pytz |
2020.5 |
pyzmq |
20.0.0 |
請求 |
2.25.1 |
requests-unixsocket |
0.2.0 |
s3transfer |
0.3.7 |
scikit-learn |
0.24.1 |
scipy |
1.6.2 |
seaborn |
0.11.1 |
Send2Trash |
1.5.0 |
setuptools |
52.0.0 |
六個 |
1.15.0 |
ssh-import-id |
5.10 |
statsmodels |
0.12.2 |
韌性 |
8.0.1 |
terminado |
0.9.4 |
testpath |
0.4.4 |
threadpoolctl |
魅惑 |
龍卷風 |
6.1 |
traitlets |
5.0.5 |
unattended-upgrades |
0.1 |
urllib3 |
1.25.11 |
virtualenv |
20.4.1 |
wcwidth |
0.2.5 |
webencodings |
0.5.1 |
輪 |
0.36.2 |
widgetsnbextension |
3.5.1 |
安裝R庫
R庫的安裝微軟在2022-02-24凹口快照。
圖書館 |
版本 |
圖書館 |
版本 |
圖書館 |
版本 |
---|---|---|---|---|---|
askpass |
1.1 |
為了 |
0.2.1 |
補丁 |
1.4.1 |
基地 |
4.1.2 |
base64enc |
0.1 - 3 |
位 |
4.0.4 |
bit64 |
你 |
團 |
1.2.2 |
引導 |
-28 - 1.3 |
釀造 |
1.0 7 |
生動 |
1.1.3 |
掃帚 |
0.7.12 |
bslib |
0.3.1 |
cachem |
1.0.6 |
callr |
3.7.0 |
脫字符號 |
-90 - 6.0 |
cellranger |
1.1.0 |
時間 |
-56 - 2.3 |
類 |
-20 - 7.3 |
cli |
3.2.0 |
clipr |
0.8.0 |
集群 |
2.1.2 |
codetools |
-18 - 0.2 |
色彩 |
2.0 - 3 |
commonmark |
1.7 |
編譯器 |
4.1.2 |
配置 |
0.3.1 |
cpp11 |
0.4.2 |
蠟筆 |
1.5.0 |
憑證 |
1.3.2 |
旋度 |
4.3.2 |
data.table |
1.14.2 |
數據集 |
4.1.2 |
DBI |
1.1.2 |
dbplyr |
2.1.1 |
desc |
1.4.0 |
devtools |
2.4.3 |
diffobj |
0.3.5 |
消化 |
0.6.29 |
dplyr |
1.0.8 |
dtplyr |
1.2.1 " |
e1071 |
1.7 9 |
省略 |
0.3.2 |
評估 |
0.15 |
fansi |
1.0.2中 |
farver |
魅惑 |
fastmap |
1.1.0 |
fontawesome |
0.2.2 |
forcats |
0.5.1 |
foreach |
1.5.2 |
外國 |
-82 - 0.8 |
打造 |
0.2.0 |
fs |
1.5.2 |
未來 |
1.24.0 |
future.apply |
1.8.1 |
含漱劑 |
1.2.0 |
泛型 |
0.1.2 |
哥特 |
1.5.0 |
ggplot2 |
3.3.5 |
“大酒店” |
1.3.0 |
gitcreds |
0.1.1 |
glmnet |
4.1 - 3 |
全局變量 |
0.14.0 |
膠水 |
1.6.1 |
googledrive |
2.0.0 |
googlesheets4 |
1.0.0 |
高爾 |
1.0.0 |
圖形 |
4.1.2 |
grDevices |
4.1.2 |
網格 |
4.1.2 |
gridExtra |
2.3 |
gsubfn |
0.7 |
gtable |
0.3.0 |
需要戴安全帽的 |
0.2.0 |
還 |
2.4.3 |
highr |
0.9 |
hms |
1.1.1 |
htmltools |
0.5.2 |
htmlwidgets |
1.5.4 |
httpuv |
1.6.5 |
httr |
1.4.2 |
hwriter |
1.3.2 |
hwriterPlus |
1.0 - 3 |
id |
1.0.1 |
ini |
0.3.1 |
不小 |
-12 - 0.9 |
isoband |
0.2.5 |
迭代器 |
1.0.14 |
jquerylib |
0.1.4 |
jsonlite |
1.8.0 |
KernSmooth |
-20 - 2.23 |
knitr |
1.37 |
標簽 |
0.4.2 |
晚些時候 |
1.3.0 |
晶格 |
-45 - 0.20 |
熔岩 |
1.6.10 |
生命周期 |
1.0.1 |
listenv |
0.8.0 |
lubridate |
1.8.0 |
magrittr |
2.0.2 |
減價 |
1.1 |
質量 |
-55 - 7.3 |
矩陣 |
1.4 0 |
memoise |
2.0.1 |
方法 |
4.1.2 |
mgcv |
-39 - 1.8 |
mime |
0.12 |
ModelMetrics |
1.2.2.2 |
modelr |
0.1.8 |
孟塞爾 |
0.5.0 |
nlme |
-155 - 3.1 |
nnet |
-17 - 7.3 |
numDeriv |
2016.8 - -1.1 |
openssl |
1.4.6 |
平行 |
4.1.2 |
平行 |
1.30.0 |
支柱 |
1.7.0 |
pkgbuild |
1.3.1 |
pkgconfig |
2.0.3 |
pkgload |
1.2.4 |
plogr |
0.2.0 |
plyr |
1.8.6 |
讚美 |
1.0.0 |
prettyunits |
1.1.1 |
pROC |
1.18.0 |
processx |
3.5.2 |
prodlim |
2019.11.13 |
進步 |
1.2.2 |
progressr |
0.10.0 |
承諾 |
1.2.0.1 |
原型 |
1.0.0 |
代理 |
-26 - 0.4 |
ps |
1.6.0 |
purrr |
0.3.4 |
r2d3 |
0.2.5 |
R6 |
2.5.1 |
randomForest |
4.7 - 1 |
rappdirs |
0.3.3 |
rcmdcheck |
1.4.0 |
RColorBrewer |
1.1 - 2 |
Rcpp |
1.0.8 |
RcppEigen |
0.3.3.9.1 |
readr |
2.1.2 |
readxl |
1.3.1 |
食譜 |
0.2.0 |
複賽 |
1.0.1 |
rematch2 |
2.1.2 |
遙控器 |
2.4.2 |
reprex |
2.0.1 |
reshape2 |
1.4.4 |
rlang |
1.0.1 |
rmarkdown |
2.11 |
RODBC |
-19 - 1.3 |
roxygen2 |
7.1.2 |
rpart |
4.1.16 |
rprojroot |
2.0.2 |
Rserve |
-10 - 1.8 |
RSQLite |
2.2.10 |
rstudioapi |
0.13 |
rversions |
2.1.1 |
房車 |
1.0.2中 |
薩斯 |
0.4.0 |
尺度 |
1.1.1 |
selectr |
0.4 - 2 |
sessioninfo |
1.2.2 |
形狀 |
1.4.6 |
閃亮的 |
1.7.1上 |
sourcetools |
0.1.7 |
sparklyr |
1.7.5 |
SparkR |
3.2.0 |
空間 |
-11 - 7.3 |
樣條函數 |
4.1.2 |
sqldf |
-11 - 0.4 |
SQUAREM |
2021.1 |
統計數據 |
4.1.2 |
stats4 |
4.1.2 |
stringi |
1.7.6 |
stringr |
1.4.0 |
生存 |
-13 - 3.2 |
sys |
3.4 |
tcltk |
4.1.2 |
TeachingDemos |
2.10 |
testthat |
3.1.2 |
寵物貓 |
3.1.6 |
tidyr |
1.2.0 |
tidyselect |
1.1.2 |
tidyverse |
1.3.1 |
timeDate |
3043.102 |
tinytex |
0.37 |
工具 |
4.1.2 |
tzdb |
0.2.0 |
usethis |
2.1.5 |
use utf8 |
1.2.2 |
跑龍套 |
4.1.2 |
uuid |
1.0 - 3 |
vctrs |
0.3.8 |
viridisLite |
0.4.0 |
發嗚嗚聲 |
1.5.7 |
沃爾多 |
0.3.1 |
晶須 |
0.4 |
withr |
2.4.3 |
xfun |
0.29 |
xml2 |
1.3.3 |
xopen |
1.0.0 |
xtable |
1.8 - 4 |
yaml |
2.3.5 |
郵政編碼 |
2.2.0 |
安裝了Java和Scala庫(Scala 2.12集群版)
組ID |
工件ID |
版本 |
---|---|---|
antlr |
antlr |
2.7.7 |
com.amazonaws |
amazon-kinesis-client |
1.12.0 |
com.amazonaws |
aws-java-sdk-autoscaling |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudformation |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudfront |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudhsm |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudsearch |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudtrail |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudwatch |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudwatchmetrics |
1.11.655 |
com.amazonaws |
aws-java-sdk-codedeploy |
1.11.655 |
com.amazonaws |
aws-java-sdk-cognitoidentity |
1.11.655 |
com.amazonaws |
aws-java-sdk-cognitosync |
1.11.655 |
com.amazonaws |
aws-java-sdk-config |
1.11.655 |
com.amazonaws |
aws-java-sdk-core |
1.11.655 |
com.amazonaws |
aws-java-sdk-datapipeline |
1.11.655 |
com.amazonaws |
aws-java-sdk-directconnect |
1.11.655 |
com.amazonaws |
aws-java-sdk-directory |
1.11.655 |
com.amazonaws |
aws-java-sdk-dynamodb |
1.11.655 |
com.amazonaws |
aws-java-sdk-ec2 |
1.11.655 |
com.amazonaws |
aws-java-sdk-ecs |
1.11.655 |
com.amazonaws |
aws-java-sdk-efs |
1.11.655 |
com.amazonaws |
aws-java-sdk-elasticache |
1.11.655 |
com.amazonaws |
aws-java-sdk-elasticbeanstalk |
1.11.655 |
com.amazonaws |
aws-java-sdk-elasticloadbalancing |
1.11.655 |
com.amazonaws |
aws-java-sdk-elastictranscoder |
1.11.655 |
com.amazonaws |
aws-java-sdk-emr |
1.11.655 |
com.amazonaws |
aws-java-sdk-glacier |
1.11.655 |
com.amazonaws |
aws-java-sdk-glue |
1.11.655 |
com.amazonaws |
aws-java-sdk-iam |
1.11.655 |
com.amazonaws |
aws-java-sdk-importexport |
1.11.655 |
com.amazonaws |
aws-java-sdk-kinesis |
1.11.655 |
com.amazonaws |
aws-java-sdk-kms |
1.11.655 |
com.amazonaws |
aws-java-sdk-lambda |
1.11.655 |
com.amazonaws |
aws-java-sdk-logs |
1.11.655 |
com.amazonaws |
aws-java-sdk-machinelearning |
1.11.655 |
com.amazonaws |
aws-java-sdk-opsworks |
1.11.655 |
com.amazonaws |
aws-java-sdk-rds |
1.11.655 |
com.amazonaws |
aws-java-sdk-redshift |
1.11.655 |
com.amazonaws |
aws-java-sdk-route53 |
1.11.655 |
com.amazonaws |
aws-java-sdk-s3 |
1.11.655 |
com.amazonaws |
aws-java-sdk-ses |
1.11.655 |
com.amazonaws |
aws-java-sdk-simpledb |
1.11.655 |
com.amazonaws |
aws-java-sdk-simpleworkflow |
1.11.655 |
com.amazonaws |
aws-java-sdk-sns |
1.11.655 |
com.amazonaws |
aws-java-sdk-sqs |
1.11.655 |
com.amazonaws |
aws-java-sdk-ssm |
1.11.655 |
com.amazonaws |
aws-java-sdk-storagegateway |
1.11.655 |
com.amazonaws |
aws-java-sdk-sts |
1.11.655 |
com.amazonaws |
aws-java-sdk-support |
1.11.655 |
com.amazonaws |
aws-java-sdk-swf-libraries |
1.11.22 |
com.amazonaws |
aws-java-sdk-workspaces |
1.11.655 |
com.amazonaws |
jmespath-java |
1.11.655 |
com.chuusai |
shapeless_2.12 |
2.3.3 |
com.clearspring.analytics |
流 |
2.9.6 |
com.databricks |
Rserve |
1.8 - 3 |
com.databricks |
jets3t |
0.7.1-0 |
com.databricks.scalapb |
compilerplugin_2.12 |
0.4.15-10 |
com.databricks.scalapb |
scalapb-runtime_2.12 |
0.4.15-10 |
com.esotericsoftware |
kryo-shaded |
4.0.2 |
com.esotericsoftware |
minlog |
1.3.0 |
com.fasterxml |
同學 |
1.3.4 |
com.fasterxml.jackson.core |
jackson-annotations |
2.12.3 |
com.fasterxml.jackson.core |
jackson-core |
2.12.3 |
com.fasterxml.jackson.core |
jackson-databind |
2.12.3 |
com.fasterxml.jackson.dataformat |
jackson-dataformat-cbor |
2.12.3 |
com.fasterxml.jackson.datatype |
jackson-datatype-joda |
2.12.3 |
com.fasterxml.jackson.module |
jackson-module-paranamer |
2.12.3 |
com.fasterxml.jackson.module |
jackson-module-scala_2.12 |
2.12.3 |
com.github.ben-manes.caffeine |
咖啡因 |
2.3.4 |
com.github.fommil |
jniloader |
1.1 |
com.github.fommil.netlib |
核心 |
1.1.2 |
com.github.fommil.netlib |
native_ref-java |
1.1 |
com.github.fommil.netlib |
native_ref-java-natives |
1.1 |
com.github.fommil.netlib |
native_system-java |
1.1 |
com.github.fommil.netlib |
native_system-java-natives |
1.1 |
com.github.fommil.netlib |
netlib-native_ref-linux-x86_64-natives |
1.1 |
com.github.fommil.netlib |
netlib-native_system-linux-x86_64-natives |
1.1 |
com.github.luben |
zstd-jni |
1.5.0-4 |
com.github.wendykierp |
JTransforms |
3.1 |
com.google.code.findbugs |
jsr305 |
3.0.0 |
com.google.code.gson |
gson |
2.8.6 |
com.google.crypto.tink |
叮叮鈴 |
1.6.0 |
com.google.flatbuffers |
flatbuffers-java |
1.9.0 |
com.google.guava |
番石榴 |
15.0 |
com.google.protobuf |
protobuf-java |
2.6.1 |
com.h2database |
h2 |
1.4.195 |
com.helger |
分析器 |
1.1.1 |
com.jcraft |
jsch |
0.1.50 |
com.jolbox |
bonecp |
0.8.0.RELEASE |
com.lihaoyi |
sourcecode_2.12 |
0.1.9 |
com.microsoft.azure |
azure-data-lake-store-sdk |
2.3.9 |
com.ning |
compress-lzf |
1.0.3 |
com.sun.istack |
istack-commons-runtime |
3.0.8 |
com.sun.mail |
javax.mail |
1.5.2 |
com.tdunning |
json |
1.8 |
com.thoughtworks.paranamer |
paranamer |
2.8 |
com.trueaccord.lenses |
lenses_2.12 |
0.4.12 |
com.twitter |
chill-java |
0.10.0 |
com.twitter |
chill_2.12 |
0.10.0 |
com.twitter |
util-app_2.12 |
7.1.0 |
com.twitter |
util-core_2.12 |
7.1.0 |
com.twitter |
util-function_2.12 |
7.1.0 |
com.twitter |
util-jvm_2.12 |
7.1.0 |
com.twitter |
util-lint_2.12 |
7.1.0 |
com.twitter |
util-registry_2.12 |
7.1.0 |
com.twitter |
util-stats_2.12 |
7.1.0 |
com.typesafe |
配置 |
1.2.1 " |
com.typesafe.scala-logging |
scala-logging_2.12 |
3.7.2章 |
com.univocity |
univocity-parsers |
2.9.1 |
com.zaxxer |
HikariCP |
4.0.3 |
commons-cli |
commons-cli |
1.2 |
commons-codec |
commons-codec |
1.15 |
commons-collections |
commons-collections |
3.2.2 |
commons-dbcp |
commons-dbcp |
1.4 |
commons-fileupload |
commons-fileupload |
1.3.3 |
commons-httpclient |
commons-httpclient |
3.1 |
commons-io |
commons-io |
2.8.0 |
commons lang |
commons lang |
2.6 |
通用日誌 |
通用日誌 |
1.1.3 |
commons net |
commons net |
3.1 |
commons-pool |
commons-pool |
1.5.4 |
dev.ludovic.netlib |
arpack |
2.2.1 |
dev.ludovic.netlib |
布拉斯特區 |
2.2.1 |
dev.ludovic.netlib |
lapack |
2.2.1 |
蜂巢3.2 - 2.3 - __hadoop - |
jets3t - 0.7 |
liball_deps_2.12 |
info.ganglia.gmetric4j |
gmetric4j |
1.0.10 |
io.airlift |
aircompressor |
0.21 |
io.delta |
delta-sharing-spark_2.12 |
0.4.0 |
io.dropwizard.metrics |
metrics-core |
以下4.4.1 |
io.dropwizard.metrics |
metrics-graphite |
以下4.4.1 |
io.dropwizard.metrics |
metrics-healthchecks |
以下4.4.1 |
io.dropwizard.metrics |
metrics-jetty9 |
以下4.4.1 |
io.dropwizard.metrics |
metrics-jmx |
以下4.4.1 |
io.dropwizard.metrics |
metrics-json |
以下4.4.1 |
io.dropwizard.metrics |
metrics-jvm |
以下4.4.1 |
io.dropwizard.metrics |
metrics-servlets |
以下4.4.1 |
io.netty |
netty-all |
4.1.68.Final |
io.prometheus |
simpleclient |
0.7.0 |
io.prometheus |
simpleclient_common |
0.7.0 |
io.prometheus |
simpleclient_dropwizard |
0.7.0 |
io.prometheus |
simpleclient_pushgateway |
0.7.0 |
io.prometheus |
simpleclient_servlet |
0.7.0 |
io.prometheus.jmx |
收集器 |
0.12.0 |
jakarta.annotation |
jakarta.annotation-api |
1.3.5 |
jakarta.servlet |
jakarta.servlet-api |
4.0.3 |
jakarta.validation |
jakarta.validation-api |
2.0.2 |
jakarta.ws.rs |
jakarta.ws.rs-api |
2.1.6 |
javax.activation |
激活 |
1.1.1 |
javax.annotation |
javax.annotation-api |
1.3.2 |
javax.el |
javax.el-api |
2.2.4 |
javax.jdo |
jdo api |
3.0.1 |
javax.transaction |
jta |
1.1 |
javax.transaction |
事務api |
1.1 |
javax.xml.bind |
jaxb-api |
2.2.2 |
javax.xml.stream |
stax-api |
1.0 - 2 |
javolution |
javolution |
5.5.1 |
jline |
jline |
2.14.6 |
joda-time |
joda-time |
2.10.10 |
log4j |
apache-log4j-extras |
1.2.17 |
log4j |
log4j |
1.2.17 |
maven-trees |
蜂巢3.2 - 2.3 - __hadoop - |
liball_deps_2.12 |
net.java.dev.jna |
jna |
5.8.0 |
net.razorvine |
地幔岩 |
4.30 |
net.sf.jpam |
jpam |
1.1 |
net.sf.opencsv |
opencsv |
2.3 |
net.sf.supercsv |
super-csv |
2.2.0 |
net.snowflake |
snowflake-ingest-sdk |
0.9.6 |
net.snowflake |
snowflake-jdbc |
3.13.3 |
net.snowflake |
spark-snowflake_2.12 |
2.9.0-spark_3.1 |
net.sourceforge.f2j |
arpack_combined_all |
0.1 |
org.acplt.remotetea |
remotetea-oncrpc |
1.1.2 |
org.antlr |
ST4 |
4.0.4 |
org.antlr |
antlr-runtime |
3.5.2 |
org.antlr |
antlr4-runtime |
4.8 |
org.antlr |
stringtemplate |
3.2.1之上 |
org.apache.ant |
螞蟻 |
1.9.2 |
org.apache.ant |
ant-jsch |
1.9.2 |
org.apache.ant |
ant-launcher |
1.9.2 |
org.apache.arrow |
arrow-format |
2.0.0 |
org.apache.arrow |
arrow-memory-core |
2.0.0 |
org.apache.arrow |
arrow-memory-netty |
2.0.0 |
org.apache.arrow |
arrow-vector |
2.0.0 |
org.apache.avro |
avro |
1.10.2 |
org.apache.avro |
avro-ipc |
1.10.2 |
org.apache.avro |
avro-mapred |
1.10.2 |
org.apache.commons |
commons-compress |
1.21 |
org.apache.commons |
commons-crypto |
1.1.0 |
org.apache.commons |
commons-lang3 |
3.12.0 |
org.apache.commons |
commons-math3 |
3.4.1 |
org.apache.commons |
commons-text |
1.6 |
org.apache.curator |
curator-client |
2.13.0 |
org.apache.curator |
curator-framework |
2.13.0 |
org.apache.curator |
curator-recipes |
2.13.0 |
org.apache.derby |
德比 |
10.14.2.0 |
org.apache.hadoop |
hadoop-client-api |
3.3.1-databricks |
org.apache.hadoop |
hadoop-client-runtime |
3.3.1 |
org.apache.hive |
hive-beeline |
2.3.9 |
org.apache.hive |
hive-cli |
2.3.9 |
org.apache.hive |
hive-jdbc |
2.3.9 |
org.apache.hive |
hive-llap-client |
2.3.9 |
org.apache.hive |
hive-llap-common |
2.3.9 |
org.apache.hive |
hive-serde |
2.3.9 |
org.apache.hive |
hive-shims |
2.3.9 |
org.apache.hive |
hive-storage-api |
2.7.2 |
org.apache.hive.shims |
蜂巢0.23 -墊片 |
2.3.9 |
org.apache.hive.shims |
hive-shims-common |
2.3.9 |
org.apache.hive.shims |
hive-shims-scheduler |
2.3.9 |
org.apache.htrace |
htrace-core4 |
4.1.0-incubating |
org.apache.httpcomponents |
httpclient |
4.5.13 |
org.apache.httpcomponents |
httpcore |
4.4.12 |
org.apache.ivy |
艾薇 |
2.5.0 |
org.apache.mesos |
mesos-shaded-protobuf |
1.4.0 |
org.apache.orc |
orc-core |
1.6.12 |
org.apache.orc |
orc-mapreduce |
1.6.12 |
org.apache.orc |
orc-shims |
1.6.12 |
org.apache.parquet |
parquet-column |
1.12.0-databricks-0003 |
org.apache.parquet |
parquet-common |
1.12.0-databricks-0003 |
org.apache.parquet |
parquet-encoding |
1.12.0-databricks-0003 |
org.apache.parquet |
parquet-format-structures |
1.12.0-databricks-0003 |
org.apache.parquet |
parquet-hadoop |
1.12.0-databricks-0003 |
org.apache.parquet |
parquet-jackson |
1.12.0-databricks-0003 |
org.apache.thrift |
libfb303 |
0.9.3 |
org.apache.thrift |
libthrift |
0.12.0 |
org.apache.xbean |
xbean-asm9-shaded |
4.20 |
org.apache.yetus |
audience-annotations |
0.5.0 |
org.apache.zookeeper |
動物園管理員 |
操作 |
org.apache.zookeeper |
zookeeper-jute |
操作 |
org.checkerframework |
checker-qual |
3.5.0 |
org.codehaus.jackson |
jackson-core-asl |
1.9.13 |
org.codehaus.jackson |
jackson-mapper-asl |
1.9.13 |
org.codehaus.janino |
commons-compiler |
3.0.16 |
org.codehaus.janino |
janino |
3.0.16 |
org.datanucleus |
datanucleus-api-jdo |
4.2.4 |
org.datanucleus |
datanucleus-core |
4.1.17 |
org.datanucleus |
datanucleus-rdbms |
4.1.19 |
org.datanucleus |
javax.jdo |
3.2.0-m3 |
org.eclipse.jetty |
jetty-client |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-continuation |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-http |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-io |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-jndi |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-plus |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-proxy |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-security |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty服務器 |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty servlet |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-servlets |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-util |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-util-ajax |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-webapp |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-xml |
9.4.43.v20210629 |
org.eclipse.jetty.websocket |
websocket-api |
9.4.43.v20210629 |
org.eclipse.jetty.websocket |
websocket-client |
9.4.43.v20210629 |
org.eclipse.jetty.websocket |
websocket-common |
9.4.43.v20210629 |
org.eclipse.jetty.websocket |
websocket服務器 |
9.4.43.v20210629 |
org.eclipse.jetty.websocket |
websocket-servlet |
9.4.43.v20210629 |
org.fusesource.leveldbjni |
leveldbjni-all |
1.8 |
org.glassfish.hk2 |
hk2-api |
2.6.1 |
org.glassfish.hk2 |
hk2-locator |
2.6.1 |
org.glassfish.hk2 |
hk2-utils |
2.6.1 |
org.glassfish.hk2 |
osgi-resource-locator |
1.0.3 |
org.glassfish.hk2.external |
aopalliance-repackaged |
2.6.1 |
org.glassfish.hk2.external |
jakarta.inject |
2.6.1 |
org.glassfish.jaxb |
jaxb運行時 |
2.3.2 |
org.glassfish.jersey.containers |
jersey-container-servlet |
2.34 |
org.glassfish.jersey.containers |
jersey-container-servlet-core |
2.34 |
org.glassfish.jersey.core |
jersey客戶端 |
2.34 |
org.glassfish.jersey.core |
jersey-common |
2.34 |
org.glassfish.jersey.core |
jersey-server |
2.34 |
org.glassfish.jersey.inject |
jersey-hk2 |
2.34 |
org.hibernate.validator |
hibernate驗證框架 |
6.1.0.Final |
org.javassist |
javassist |
3.25.0-GA |
org.jboss.logging |
jboss-logging |
3.3.2.Final |
org.jdbi |
jdbi |
2.63.1 |
org.jetbrains |
注釋 |
17.0.0 |
org.joda |
joda-convert |
1.7 |
org.jodd |
jodd-core |
3.5.2 |
org.json4s |
json4s-ast_2.12 |
3.7.0-M11 |
org.json4s |
json4s-core_2.12 |
3.7.0-M11 |
org.json4s |
json4s-jackson_2.12 |
3.7.0-M11 |
org.json4s |
json4s-scalap_2.12 |
3.7.0-M11 |
org.lz4 |
lz4-java |
1.7.1上 |
org.mariadb.jdbc |
mariadb-java-client |
2.2.5 |
org.objenesis |
objenesis |
2.5.1 |
org.postgresql |
postgresql |
42.2.19 |
org.roaringbitmap |
RoaringBitmap |
0.9.14 |
org.roaringbitmap |
墊片 |
0.9.14 |
org.rocksdb |
rocksdbjni |
6.20.3 |
org.rosuda.REngine |
REngine |
魅惑 |
org.scala-lang |
scala-compiler_2.12 |
2.12.14 |
org.scala-lang |
scala-library_2.12 |
2.12.14 |
org.scala-lang |
scala-reflect_2.12 |
2.12.14 |
org.scala-lang.modules |
scala-collection-compat_2.12 |
2.4.3 |
org.scala-lang.modules |
scala-parser-combinators_2.12 |
1.1.2 |
org.scala-lang.modules |
scala-xml_2.12 |
1.2.0 |
org.scala-sbt |
測試界麵 |
1.0 |
org.scalacheck |
scalacheck_2.12 |
1.14.2 |
org.scalactic |
scalactic_2.12 |
3.0.8 |
org.scalanlp |
breeze-macros_2.12 |
1.2 |
org.scalanlp |
breeze_2.12 |
1.2 |
org.scalatest |
scalatest_2.12 |
3.0.8 |
org.slf4j |
jcl-over-slf4j |
1.7.30 |
org.slf4j |
jul-to-slf4j |
1.7.30 |
org.slf4j |
slf4j-api |
1.7.30 |
org.slf4j |
slf4j-log4j12 |
1.7.30 |
org.spark-project.spark |
未使用的 |
1.0.0 |
org.threeten |
threeten-extra |
1.5.0 |
org.tukaani |
xz |
1.8 |
org.typelevel |
algebra_2.12 |
2.0.1 |
org.typelevel |
cats-kernel_2.12 |
2.1.1 |
org.typelevel |
macro-compat_2.12 |
1.1.1 |
org.typelevel |
spire-macros_2.12 |
0.17.0 |
org.typelevel |
spire-Beplay体育安卓版本platform_2.12 |
0.17.0 |
org.typelevel |
spire-util_2.12 |
0.17.0 |
org.typelevel |
spire_2.12 |
0.17.0 |
org.wildfly.openssl |
wildfly-openssl |
1.0.7.Final |
org.xerial |
sqlite-jdbc |
3.8.11.2 |
org.xerial.snappy |
snappy-java |
1.1.8.4 |
org.yaml |
snakeyaml |
1.24 |
奧羅 |
奧羅 |
2.0.8 |
pl.edu.icm |
JLargeArrays |
1.5 |
software.amazon.ion |
ion-java |
1.0.2中 |
stax |
stax-api |
1.0.1 |