Databricks運行時

以下發布說明提供了Databricks運行時11.1的信息,由Apache Spark 3.3.0提供支持。Databricks於2022年7月發布了這些圖像。

新功能和改進

光子是GA

光子現在可以從Databricks Runtime 11.1開始使用。Photon是Databricks上的原生向量化查詢引擎,被編寫為直接兼容Apache Spark api,因此它可以與您現有的代碼一起工作。Photon是在c++中開發的,以利用現代硬件,並在向量化查詢處理中使用最新的技術來利用cpu中的數據和指令級並行性,增強真實數據和應用程序的性能-所有這些都是在您的數據湖上原生的。

Photon是高性能運行時的一部分,它可以更快地運行現有的SQL和DataFrame API調用,並降低每個工作負載的總成本。Photon在Databricks SQL倉庫中默認使用。

新功能和改進包括:

  • 新的向量化排序運算符

  • 新的向量化窗口函數

  • 跨所有雲的新實例類型和大小

限製:

  • Photon不支持Scala/Python udf

  • Photon不支持RDD

  • 光子不支持結構化流

有關更多信息,請參閱以下Photon公告。

光子:新的向量化排序運算符

Photon現在支持向量化排序當查詢包含SORT_BYCLUSTER_BY的窗口函數訂單通過

限製:Photon不支持全局變量訂單通過條款。窗口計算的排序將光子化,但全局排序將繼續在Spark中運行。

光子:新的向量化窗口函數

Photon現在支持許多幀類型和函數的向量化窗口函數計算。新的窗口函數包括:row_number排名dense_rank滯後引領percent_rankntile,nth_value.支持的窗框類型:運行(無限當前的),無界(無限無限),成長(無限<抵消>),以及收縮(<抵消>無限).

限製:

  • 僅支持光子所有幀類型的版本。

  • 光子還不支持滑動幀類型(<抵消><抵消>).

Photon:支持的實例類型

i3

i3en

i4i

im4gn

is4gen

m5ad

m5d

m5dn

m6gd

r5d

r5dn

r6gd

x2gd

更改數據提要現在可以自動處理超出範圍的時間戳

更改數據提要(CDF)現在提供了一種新模式,可以讓您在不拋出錯誤的情況下提供時間戳或超過最新提交版本的版本。該模式默認關閉。您可以通過設置配置來啟用它spark.databricks.delta.changeDataFeed.timestampOutOfRange.enabled真正的

描述和顯示SQL函數現在顯示Unity目錄名稱在他們的輸出(公開預覽)

的命令DESC表格DESC數據庫DESC模式DESC名稱空間DESC函數解釋,顯示創建表格現在總是在輸出中顯示目錄名稱。

Auto Loader中Parquet文件的模式推斷和演化(公開預覽)

Auto Loader現在支持Parquet文件的模式推斷和進化。就像JSON、CSV和Avro格式一樣,現在可以使用已搶救數據列來搶救Parquet文件中可能出現的意外數據。這包括不能以預期的數據類型解析的數據、具有不同大小寫的列或不屬於預期模式的附加列。您可以配置Auto Loader,以便在遇到在傳入數據中添加新列時自動演變模式。看到在Auto Loader中配置模式推斷和進化

Delta Lake支持動態分區覆蓋

Delta Lake現在啟用動態分區覆蓋模式,覆蓋寫入將提交新數據的每個邏輯分區中的所有現有數據。看到有選擇地用Delta Lake覆蓋數據

為在Unity Catalog中創建的對象提供信息模式支持

信息模式為各種數據庫對象(包括表和視圖、約束和例程)的元數據提供了一個基於SQL的自我描述API。在信息模式中,您可以找到一組視圖,這些視圖描述了您有權查看的模式編目所知道的對象。的信息模式係統Catalog返回關於metastore中所有Catalog中的對象的信息。看到信息模式

帶有Unity目錄的Delta Lake表的信息約束(公開預覽)

你現在可以用Unity Catalog在Delta Lake表上定義信息主鍵和外鍵約束。信息約束沒有強製執行。看到約束條款

Delta共享是GA

Delta Sharing現在從Databricks Runtime 11.1開始普遍可用。

Databricks to Databricks Delta Sharing完全管理,無需交換令牌。您可以在UI中或使用SQL和REST api創建和管理提供者、接收者和共享。

一些特性包括限製收件人訪問、使用IP訪問列表和區域限製查詢數據,以及將Delta Sharing管理委托給非管理員。您還可以查詢對數據的更改,或與“更改數據提要”共享增量版本。看到使用Delta Sharing安全地共享數據

行為變化

描述表和顯示表屬性的敏感屬性編校

描述表格而且顯示表格屬性命令現在編校敏感屬性。

庫升級

  • 升級的Python庫:

    • Filelock從3.6.0到3.7.1

    • 從5.6.0繪製到5.8.2

    • Protobuf從3.20.1到4.21.2

  • 升級的R庫:

    • 從2.3-56到2.3-57

    • DBI從1.1.2到1.1.3

    • Dbplyr從2.1.1到2.2.0

    • E1071從1.7-9到1.7-11

    • 未來從1.25.0到1.26.1

    • 從0.14.0到0.15.1的全局變量

    • 從0.2.0到1.1.0

    • 我從0.9-12到0.9-13

    • Openssl從2.0.0到2.0.2

    • 從1.31.1平行到1.32.0

    • 從3.5.3到3.6.1

    • 從0.10.0到0.10.1

    • 代理從0.4-26到0.4-27

    • Ps從1.7.0到1.7.1

    • randomForest從4.7-1到4.7-1.1

    • Roxygen2從7.1.2到7.2.0

    • 預定量從1.8-10到1.8-11

    • 從2.2.13到2.2.14

    • Sparklyr從1.7.5到1.7.7

    • Tinytex從0.38到0.40

    • 從2.1.5到2.1.6使用this

    • Xfun從0.30增加到0.31

  • 升級的Java庫:

    • Io.delta.delta-sharing-spark_2.12從0.4.0到0.5.0

Apache火花

Databricks運行時11.2包含Apache Spark 3.3.0。此版本包括所有Spark修複和改進Databricks運行時,以及以下對Spark的額外錯誤修複和改進:

係統環境

  • 操作係統: Ubuntu 20.04.4 LTS

  • Java: Zulu 8.56.0.21-CA-linux64

  • Scala: 2.12.14

  • Python: 3.9.5

  • R: 4.1.3

  • 三角洲湖: 1.2.1 "

已安裝的Python庫

圖書館

版本

圖書館

版本

圖書館

版本

Antergos Linux

2015.10 (ISO-Rolling)

argon2-cffi

20.1.0

async-generator

1.10

attrs

21.2.0

backcall

0.2.0

backports.entry-points-selectable

1.1.1

黑色的

22.3.0

漂白劑

4.0.0

boto3

1.21.18

botocore

1.24.18

certifi

2021.10.8

cffi

1.14.6

chardet

4.0.0

charset-normalizer

2.0.4

點擊

8.0.3

密碼學

3.4.8

周期計

0.10.0

Cython

0.29.24

dbus-python

1.2.16

debugpy

1.4.1

裝飾

5.1.0

defusedxml

是0.7.1

distlib

0.3.5

distro-info

0.23 ubuntu1

entrypoints

0.3

facets-overview

1.0.0

filelock

3.8.0

idna

3.2

ipykernel

6.12.1

ipython

7.32.0

ipython-genutils

0.2.0

ipywidgets

7.7.0

絕地武士

0.18.0

Jinja2

14

jmespath

0.10.0

joblib

1.0.1

jsonschema

3.2.0

jupyter-client

6.1.12

jupyter-core

4.8.1

jupyterlab-pygments

0.1.2

jupyterlab-widgets

1.0.0

kiwisolver

1.3.1

MarkupSafe

2.0.1

matplotlib

3.4.3

matplotlib-inline

0.1.2

使走調

0.8.4

mypy-extensions

0.4.3

nbclient

0.5.3

nbconvert

6.1.0

nbformat

5.1.3

nest-asyncio

1.5.1

筆記本

6.4.5

numpy

1.20.3

包裝

21.0

熊貓

1.3.4

pandocfilters

3

parso

0.8.2

pathspec

0.9.0

容易受騙的人

0.5.2

pexpect

4.8.0

pickleshare

0.7.5

枕頭

8.4.0

皮普

21.2.4

Beplay体育安卓版本platformdirs

2.5.2

情節

5.9.0

prometheus-client

0.11.0

prompt-toolkit

3.0.20

protobuf

4.21.5

psutil

5.8.0

psycopg2

2.9.3

ptyprocess

0.7.0

pyarrow

7.0.0

pycparser

2.20

Pygments

2.10.0

PyGObject

3.36.0

pyodbc

4.0.31

pyparsing

3.0.4

pyrsistent

0.18.0

python-apt

2.0.0 + ubuntu0.20.4.7

python-dateutil

2.8.2

pytz

2021.3

pyzmq

22.2.1

請求

2.26.0

requests-unixsocket

0.2.0

s3transfer

0.5.2

scikit-learn

0.24.2

scipy

1.7.1上

seaborn

0.11.2

Send2Trash

1.8.0

setuptools

58.0.4

六個

1.16.0

ssh-import-id

5.10

statsmodels

0.12.2

韌性

8.0.1

terminado

0.9.4

testpath

0.5.0

threadpoolctl

2.2.0

tokenize-rt

4.2.1

tomli

2.0.1

龍卷風

6.1

traitlets

5.1.0

typing-extensions

3.10.0.2

unattended-upgrades

0.1

urllib3

1.26.7

virtualenv

20.8.0

wcwidth

0.2.5

webencodings

0.5.1

0.37.0

widgetsnbextension

3.6.0

已安裝的R庫

R庫從微軟CRAN快照在2022-08-15

圖書館

版本

圖書館

版本

圖書館

版本

askpass

1.1

為了

0.2.1

補丁

1.4.1

基地

4.1.3

base64enc

0.1 - 3

4.0.4

bit64

1.2.3

引導

-28 - 1.3

釀造

1.0 7

生動

1.1.3

掃帚

1.0.0

bslib

0.4.0

cachem

1.0.6

callr

3.7.1

脫字符號

-93 - 6.0

cellranger

1.1.0

時間

-57 - 2.3

-20 - 7.3

cli

3.3.0

clipr

0.8.0

集群

2.1.3

codetools

-18 - 0.2

色彩

2.0 - 3

commonmark

1.8.0

編譯器

4.1.3

配置

0.3.1

cpp11

0.4.2

蠟筆

1.5.1

憑證

1.3.2

旋度

4.3.2

data.table

1.14.2

數據集

4.1.3

DBI

1.1.3

dbplyr

2.2.1

desc

1.4.1

devtools

2.4.4

diffobj

0.3.5

消化

0.6.29

downlit

0.4.2

dplyr

1.0.9

dtplyr

1.2.1 "

e1071

-11 - 1.7

省略

0.3.2

評估

0.16

fansi

1.0.3

farver

2.1.1

fastmap

1.1.0

fontawesome

0.3.0

forcats

0.5.1

foreach

1.5.2

外國

-82 - 0.8

打造

0.2.0

fs

1.5.2

未來

1.27.0

future.apply

1.9.0

含漱劑

1.2.0

泛型

0.1.3

哥特

1.7.0

ggplot2

3.3.6

“大酒店”

1.3.0

gitcreds

0.1.1

glmnet

4.1 - 4

全局變量

0.16.0

膠水

1.6.2

googledrive

2.0.0

googlesheets4

1.0.1

高爾

1.0.0

圖形

4.1.3

grDevices

4.1.3

網格

4.1.3

gridExtra

2.3

gsubfn

0.7

gtable

0.3.0

需要戴安全帽的

1.2.0

2.5.0

highr

0.9

hms

1.1.1

htmltools

0.5.3

htmlwidgets

1.5.4

httpuv

1.6.5

httr

3

id

1.0.1

ini

0.3.1

不小

-13 - 0.9

isoband

0.2.5

迭代器

1.0.14

jquerylib

0.1.4

jsonlite

1.8.0

KernSmooth

-20 - 2.23

knitr

1.39

標簽

0.4.2

晚些時候

1.3.0

晶格

-45 - 0.20

熔岩

1.6.10

生命周期

1.0.1

listenv

0.8.0

lubridate

1.8.0

magrittr

2.0.3

減價

1.1

質量

-56 - 7.3

矩陣

1.4 - 1

memoise

2.0.1

方法

4.1.3

mgcv

-40 - 1.8

mime

0.12

miniUI

0.1.1.1

ModelMetrics

1.2.2.2

modelr

0.1.8

孟塞爾

0.5.0

nlme

-157 - 3.1

nnet

-17 - 7.3

numDeriv

2016.8 - -1.1

openssl

2.0.2

平行

4.1.3

平行

1.32.1

支柱

1.8.0

pkgbuild

1.3.1

pkgconfig

2.0.3

pkgdown

2.0.6

pkgload

1.3.0

plogr

0.2.0

plyr

1.8.7

讚美

1.0.0

prettyunits

1.1.1

pROC

1.18.0

processx

3.7.0

prodlim

2019.11.13

profvis

0.3.7

進步

1.2.2

progressr

0.10.1

承諾

1.2.0.1

原型

1.0.0

代理

-27 - 0.4

ps

1.7.1上

purrr

0.3.4

r2d3

0.2.6雖然隻是

R6

2.5.1

ragg

1.2.2

randomForest

4.7 - -1.1

rappdirs

0.3.3

rcmdcheck

1.4.0

RColorBrewer

1.1 - 3

Rcpp

1.0.9

RcppEigen

0.3.3.9.2

readr

2.1.2

readxl

1.4.0

食譜

1.0.1

複賽

1.0.1

rematch2

2.1.2

遙控器

2.4.2

reprex

2.0.1

reshape2

1.4.4

rlang

1.0.4

rmarkdown

2.14

RODBC

-19 - 1.3

roxygen2

7.2.1

rpart

4.1.16

rprojroot

2.0.3

Rserve

-11 - 1.8

RSQLite

2.2.15

rstudioapi

0.13

rversions

2.1.1

房車

1.0.2中

薩斯

0.4.2

尺度

1.2.0

selectr

0.4 - 2

sessioninfo

1.2.2

形狀

1.4.6

閃亮的

1.7.2

sourcetools

0.1.7

sparklyr

1.7.7

SparkR

3.3.0

空間

-11 - 7.3

樣條函數

4.1.3

sqldf

-11 - 0.4

SQUAREM

2021.1

統計數據

4.1.3

stats4

4.1.3

stringi

1.7.8

stringr

1.4.0

生存

-13 - 3.2

sys

3.4

systemfonts

1.0.4

tcltk

4.1.3

testthat

3.1.4

textshaping

0.3.6

寵物貓

3.1.8中

tidyr

1.2.0

tidyselect

1.1.2

tidyverse

1.3.2

timeDate

4021.104

tinytex

0.40

工具

4.1.3

tzdb

0.3.0

urlchecker

1.0.1

usethis

2.1.6

use utf8

1.2.2

跑龍套

4.1.3

uuid

1.1 0

vctrs

0.4.1

viridisLite

0.4.0

發嗚嗚聲

1.5.7

沃爾多

0.4.0

晶須

0.4

withr

2.5.0

xfun

0.32

xml2

1.3.3

xopen

1.0.0

xtable

1.8 - 4

yaml

2.3.5

郵政編碼

2.2.0

安裝Java和Scala庫(Scala 2.12集群版本)

組ID

工件ID

版本

antlr

antlr

2.7.7

com.amazonaws

amazon-kinesis-client

1.12.0

com.amazonaws

aws-java-sdk-autoscaling

1.12.189

com.amazonaws

aws-java-sdk-cloudformation

1.12.189

com.amazonaws

aws-java-sdk-cloudfront

1.12.189

com.amazonaws

aws-java-sdk-cloudhsm

1.12.189

com.amazonaws

aws-java-sdk-cloudsearch

1.12.189

com.amazonaws

aws-java-sdk-cloudtrail

1.12.189

com.amazonaws

aws-java-sdk-cloudwatch

1.12.189

com.amazonaws

aws-java-sdk-cloudwatchmetrics

1.12.189

com.amazonaws

aws-java-sdk-codedeploy

1.12.189

com.amazonaws

aws-java-sdk-cognitoidentity

1.12.189

com.amazonaws

aws-java-sdk-cognitosync

1.12.189

com.amazonaws

aws-java-sdk-config

1.12.189

com.amazonaws

aws-java-sdk-core

1.12.189

com.amazonaws

aws-java-sdk-datapipeline

1.12.189

com.amazonaws

aws-java-sdk-directconnect

1.12.189

com.amazonaws

aws-java-sdk-directory

1.12.189

com.amazonaws

aws-java-sdk-dynamodb

1.12.189

com.amazonaws

aws-java-sdk-ec2

1.12.189

com.amazonaws

aws-java-sdk-ecs

1.12.189

com.amazonaws

aws-java-sdk-efs

1.12.189

com.amazonaws

aws-java-sdk-elasticache

1.12.189

com.amazonaws

aws-java-sdk-elasticbeanstalk

1.12.189

com.amazonaws

aws-java-sdk-elasticloadbalancing

1.12.189

com.amazonaws

aws-java-sdk-elastictranscoder

1.12.189

com.amazonaws

aws-java-sdk-emr

1.12.189

com.amazonaws

aws-java-sdk-glacier

1.12.189

com.amazonaws

aws-java-sdk-glue

1.12.189

com.amazonaws

aws-java-sdk-iam

1.12.189

com.amazonaws

aws-java-sdk-importexport

1.12.189

com.amazonaws

aws-java-sdk-kinesis

1.12.189

com.amazonaws

aws-java-sdk-kms

1.12.189

com.amazonaws

aws-java-sdk-lambda

1.12.189

com.amazonaws

aws-java-sdk-logs

1.12.189

com.amazonaws

aws-java-sdk-machinelearning

1.12.189

com.amazonaws

aws-java-sdk-opsworks

1.12.189

com.amazonaws

aws-java-sdk-rds

1.12.189

com.amazonaws

aws-java-sdk-redshift

1.12.189

com.amazonaws

aws-java-sdk-route53

1.12.189

com.amazonaws

aws-java-sdk-s3

1.12.189

com.amazonaws

aws-java-sdk-ses

1.12.189

com.amazonaws

aws-java-sdk-simpledb

1.12.189

com.amazonaws

aws-java-sdk-simpleworkflow

1.12.189

com.amazonaws

aws-java-sdk-sns

1.12.189

com.amazonaws

aws-java-sdk-sqs

1.12.189

com.amazonaws

aws-java-sdk-ssm

1.12.189

com.amazonaws

aws-java-sdk-storagegateway

1.12.189

com.amazonaws

aws-java-sdk-sts

1.12.189

com.amazonaws

aws-java-sdk-support

1.12.189

com.amazonaws

aws-java-sdk-swf-libraries

1.11.22

com.amazonaws

aws-java-sdk-workspaces

1.12.189

com.amazonaws

jmespath-java

1.12.189

com.chuusai

shapeless_2.12

2.3.3

com.clearspring.analytics

2.9.6

com.databricks

Rserve

1.8 - 3

com.databricks

jets3t

0.7.1-0

com.databricks.scalapb

compilerplugin_2.12

0.4.15-10

com.databricks.scalapb

scalapb-runtime_2.12

0.4.15-10

com.esotericsoftware

kryo-shaded

4.0.2

com.esotericsoftware

minlog

1.3.0

com.fasterxml

同學

1.3.4

com.fasterxml.jackson.core

jackson-annotations

2.13.3

com.fasterxml.jackson.core

jackson-core

2.13.3

com.fasterxml.jackson.core

jackson-databind

2.13.3

com.fasterxml.jackson.dataformat

jackson-dataformat-cbor

2.13.3

com.fasterxml.jackson.datatype

jackson-datatype-joda

2.13.3

com.fasterxml.jackson.datatype

jackson-datatype-jsr310

2.13.3

com.fasterxml.jackson.module

jackson-module-paranamer

2.13.3

com.fasterxml.jackson.module

jackson-module-scala_2.12

2.13.3

com.github.ben-manes.caffeine

咖啡因

2.3.4

com.github.fommil

jniloader

1.1

com.github.fommil.netlib

核心

1.1.2

com.github.fommil.netlib

native_ref-java

1.1

com.github.fommil.netlib

native_ref-java-natives

1.1

com.github.fommil.netlib

native_system-java

1.1

com.github.fommil.netlib

native_system-java-natives

1.1

com.github.fommil.netlib

netlib-native_ref-linux-x86_64-natives

1.1

com.github.fommil.netlib

netlib-native_system-linux-x86_64-natives

1.1

com.github.luben

zstd-jni

1.5.2-1

com.github.wendykierp

JTransforms

3.1

com.google.code.findbugs

jsr305

3.0.0

com.google.code.gson

gson

2.8.6

com.google.crypto.tink

叮叮鈴

1.6.1

com.google.flatbuffers

flatbuffers-java

1.12.0

com.google.guava

番石榴

15.0

com.google.protobuf

protobuf-java

2.6.1

com.h2database

h2

2.0.204

com.helger

分析器

1.1.1

com.jcraft

jsch

0.1.50

com.jolbox

bonecp

0.8.0.RELEASE

com.lihaoyi

sourcecode_2.12

0.1.9

com.microsoft.azure

azure-data-lake-store-sdk

2.3.9

com.ning

compress-lzf

1.1

com.sun.mail

javax.mail

1.5.2

com.tdunning

json

1.8

com.thoughtworks.paranamer

paranamer

2.8

com.trueaccord.lenses

lenses_2.12

0.4.12

com.twitter

chill-java

0.10.0

com.twitter

chill_2.12

0.10.0

com.twitter

util-app_2.12

7.1.0

com.twitter

util-core_2.12

7.1.0

com.twitter

util-function_2.12

7.1.0

com.twitter

util-jvm_2.12

7.1.0

com.twitter

util-lint_2.12

7.1.0

com.twitter

util-registry_2.12

7.1.0

com.twitter

util-stats_2.12

7.1.0

com.typesafe

配置

1.2.1 "

com.typesafe.scala-logging

scala-logging_2.12

3.7.2章

com.uber

h3

3.7.0

com.univocity

univocity-parsers

2.9.1

com.zaxxer

HikariCP

4.0.3

commons-cli

commons-cli

1.5.0

commons-codec

commons-codec

1.15

commons-collections

commons-collections

3.2.2

commons-dbcp

commons-dbcp

1.4

commons-fileupload

commons-fileupload

1.3.3

commons-httpclient

commons-httpclient

3.1

commons-io

commons-io

2.11.0

commons lang

commons lang

2.6

通用日誌

通用日誌

1.1.3

commons-pool

commons-pool

1.5.4

dev.ludovic.netlib

arpack

2.2.1

dev.ludovic.netlib

布拉斯特區

2.2.1

dev.ludovic.netlib

lapack

2.2.1

hadoop3

jets3t - 0.7

liball_deps_2.12

info.ganglia.gmetric4j

gmetric4j

1.0.10

io.airlift

aircompressor

0.21

io.delta

delta-sharing-spark_2.12

0.5.0

io.dropwizard.metrics

metrics-core

以下4.4.1

io.dropwizard.metrics

metrics-graphite

以下4.4.1

io.dropwizard.metrics

metrics-healthchecks

以下4.4.1

io.dropwizard.metrics

metrics-jetty9

以下4.4.1

io.dropwizard.metrics

metrics-jmx

以下4.4.1

io.dropwizard.metrics

metrics-json

以下4.4.1

io.dropwizard.metrics

metrics-jvm

以下4.4.1

io.dropwizard.metrics

metrics-servlets

以下4.4.1

io.netty

netty-all

4.1.74.Final

io.netty

netty-buffer

4.1.74.Final

io.netty

netty-codec

4.1.74.Final

io.netty

netty-common

4.1.74.Final

io.netty

netty-handler

4.1.74.Final

io.netty

netty-resolver

4.1.74.Final

io.netty

netty-tcnative-classes

2.0.48.Final

io.netty

netty-transport

4.1.74.Final

io.netty

netty-transport-classes-epoll

4.1.74.Final

io.netty

netty-transport-classes-kqueue

4.1.74.Final

io.netty

netty-transport-native-epoll-linux-aarch_64

4.1.74.Final

io.netty

netty-transport-native-epoll-linux-x86_64

4.1.74.Final

io.netty

netty-transport-native-kqueue-osx-aarch_64

4.1.74.Final

io.netty

netty-transport-native-kqueue-osx-x86_64

4.1.74.Final

io.netty

netty-transport-native-unix-common

4.1.74.Final

io.prometheus

simpleclient

0.7.0

io.prometheus

simpleclient_common

0.7.0

io.prometheus

simpleclient_dropwizard

0.7.0

io.prometheus

simpleclient_pushgateway

0.7.0

io.prometheus

simpleclient_servlet

0.7.0

io.prometheus.jmx

收集器

0.12.0

jakarta.annotation

jakarta.annotation-api

1.3.5

jakarta.servlet

jakarta.servlet-api

4.0.3

jakarta.validation

jakarta.validation-api

2.0.2

jakarta.ws.rs

jakarta.ws.rs-api

2.1.6

javax.activation

激活

1.1.1

javax.annotation

javax.annotation-api

1.3.2

javax.el

javax.el-api

2.2.4

javax.jdo

jdo api

3.0.1

javax.transaction

jta

1.1

javax.transaction

事務api

1.1

javax.xml.bind

jaxb-api

. 2.2.11

javolution

javolution

5.5.1

jline

jline

2.14.6

joda-time

joda-time

2.10.13

mvn

hadoop3

liball_deps_2.12

net.java.dev.jna

jna

5.8.0

net.razorvine

泡菜

1.2

net.sf.jpam

jpam

1.1

net.sf.opencsv

opencsv

2.3

net.sf.supercsv

super-csv

2.2.0

net.snowflake

snowflake-ingest-sdk

0.9.6

net.snowflake

snowflake-jdbc

3.13.14

net.snowflake

spark-snowflake_2.12

2.10.0-spark_3.2

net.sourceforge.f2j

arpack_combined_all

0.1

org.acplt.remotetea

remotetea-oncrpc

1.1.2

org.antlr

ST4

4.0.4

org.antlr

antlr-runtime

3.5.2

org.antlr

antlr4-runtime

4.8

org.antlr

stringtemplate

3.2.1之上

org.apache.ant

螞蟻

1.9.2

org.apache.ant

ant-jsch

1.9.2

org.apache.ant

ant-launcher

1.9.2

org.apache.arrow

arrow-format

7.0.0

org.apache.arrow

arrow-memory-core

7.0.0

org.apache.arrow

arrow-memory-netty

7.0.0

org.apache.arrow

arrow-vector

7.0.0

org.apache.avro

avro

1.11.0

org.apache.avro

avro-ipc

1.11.0

org.apache.avro

avro-mapred

1.11.0

org.apache.commons

commons-collections4

4.4

org.apache.commons

commons-compress

1.21

org.apache.commons

commons-crypto

1.1.0

org.apache.commons

commons-lang3

3.12.0

org.apache.commons

commons-math3

3.6.1

org.apache.commons

commons-text

1.9

org.apache.curator

curator-client

2.13.0

org.apache.curator

curator-framework

2.13.0

org.apache.curator

curator-recipes

2.13.0

org.apache.derby

德比

10.14.2.0

org.apache.hadoop

hadoop-client-api

3.3.2-databricks

org.apache.hadoop

hadoop-client-runtime

3.3.2

org.apache.hive

hive-beeline

2.3.9

org.apache.hive

hive-cli

2.3.9

org.apache.hive

hive-jdbc

2.3.9

org.apache.hive

hive-llap-client

2.3.9

org.apache.hive

hive-llap-common

2.3.9

org.apache.hive

hive-serde

2.3.9

org.apache.hive

hive-shims

2.3.9

org.apache.hive

hive-storage-api

2.7.2

org.apache.hive.shims

蜂巢0.23 -墊片

2.3.9

org.apache.hive.shims

hive-shims-common

2.3.9

org.apache.hive.shims

hive-shims-scheduler

2.3.9

org.apache.httpcomponents

httpclient

4.5.13

org.apache.httpcomponents

httpcore

4.4.14

org.apache.ivy

艾薇

2.5.0

org.apache.logging.log4j

log4j - 1.2 api

2.17.2

org.apache.logging.log4j

log4j api

2.17.2

org.apache.logging.log4j

log4j-core

2.17.2

org.apache.logging.log4j

log4j-slf4j-impl

2.17.2

org.apache.mesos

mesos-shaded-protobuf

1.4.0

org.apache.orc

orc-core

1.7.5

org.apache.orc

orc-mapreduce

1.7.5

org.apache.orc

orc-shims

1.7.5

org.apache.parquet

parquet-column

1.12.0-databricks-0004

org.apache.parquet

parquet-common

1.12.0-databricks-0004

org.apache.parquet

parquet-encoding

1.12.0-databricks-0004

org.apache.parquet

parquet-format-structures

1.12.0-databricks-0004

org.apache.parquet

parquet-hadoop

1.12.0-databricks-0004

org.apache.parquet

parquet-jackson

1.12.0-databricks-0004

org.apache.thrift

libfb303

0.9.3

org.apache.thrift

libthrift

0.12.0

org.apache.xbean

xbean-asm9-shaded

4.20

org.apache.yetus

audience-annotations

0.5.0

org.apache.zookeeper

動物園管理員

操作

org.apache.zookeeper

zookeeper-jute

操作

org.checkerframework

checker-qual

3.5.0

org.codehaus.jackson

jackson-core-asl

1.9.13

org.codehaus.jackson

jackson-mapper-asl

1.9.13

org.codehaus.janino

commons-compiler

3.0.16

org.codehaus.janino

janino

3.0.16

org.datanucleus

datanucleus-api-jdo

4.2.4

org.datanucleus

datanucleus-core

4.1.17

org.datanucleus

datanucleus-rdbms

4.1.19

org.datanucleus

javax.jdo

3.2.0-m3

org.eclipse.jetty

jetty-client

9.4.46.v20220331

org.eclipse.jetty

jetty-continuation

9.4.46.v20220331

org.eclipse.jetty

jetty-http

9.4.46.v20220331

org.eclipse.jetty

jetty-io

9.4.46.v20220331

org.eclipse.jetty

jetty-jndi

9.4.46.v20220331

org.eclipse.jetty

jetty-plus

9.4.46.v20220331

org.eclipse.jetty

jetty-proxy

9.4.46.v20220331

org.eclipse.jetty

jetty-security

9.4.46.v20220331

org.eclipse.jetty

jetty服務器

9.4.46.v20220331

org.eclipse.jetty

jetty servlet

9.4.46.v20220331

org.eclipse.jetty

jetty-servlets

9.4.46.v20220331

org.eclipse.jetty

jetty-util

9.4.46.v20220331

org.eclipse.jetty

jetty-util-ajax

9.4.46.v20220331

org.eclipse.jetty

jetty-webapp

9.4.46.v20220331

org.eclipse.jetty

jetty-xml

9.4.46.v20220331

org.eclipse.jetty.websocket

websocket-api

9.4.46.v20220331

org.eclipse.jetty.websocket

websocket-client

9.4.46.v20220331

org.eclipse.jetty.websocket

websocket-common

9.4.46.v20220331

org.eclipse.jetty.websocket

websocket服務器

9.4.46.v20220331

org.eclipse.jetty.websocket

websocket-servlet

9.4.46.v20220331

org.fusesource.leveldbjni

leveldbjni-all

1.8

org.glassfish.hk2

hk2-api

2.6.1

org.glassfish.hk2

hk2-locator

2.6.1

org.glassfish.hk2

hk2-utils

2.6.1

org.glassfish.hk2

osgi-resource-locator

1.0.3

org.glassfish.hk2.external

aopalliance-repackaged

2.6.1

org.glassfish.hk2.external

jakarta.inject

2.6.1

org.glassfish.jersey.containers

jersey-container-servlet

2.34

org.glassfish.jersey.containers

jersey-container-servlet-core

2.34

org.glassfish.jersey.core

jersey客戶端

2.34

org.glassfish.jersey.core

jersey-common

2.34

org.glassfish.jersey.core

jersey-server

2.34

org.glassfish.jersey.inject

jersey-hk2

2.34

org.hibernate.validator

hibernate驗證框架

6.1.0.Final

org.javassist

javassist

3.25.0-GA

org.jboss.logging

jboss-logging

3.3.2.Final

org.jdbi

jdbi

2.63.1

org.jetbrains

注釋

17.0.0

org.joda

joda-convert

1.7

org.jodd

jodd-core

3.5.2

org.json4s

json4s-ast_2.12

3.7.0-M11

org.json4s

json4s-core_2.12

3.7.0-M11

org.json4s

json4s-jackson_2.12

3.7.0-M11

org.json4s

json4s-scalap_2.12

3.7.0-M11

org.lz4

lz4-java

1.8.0

org.mariadb.jdbc

mariadb-java-client

第2.7.4

org.mlflow

mlflow-spark

1.27.0

org.objenesis

objenesis

2.5.1

org.postgresql

postgresql

42.3.3

org.roaringbitmap

RoaringBitmap

0.9.25

org.roaringbitmap

墊片

0.9.25

org.rocksdb

rocksdbjni

6.24.2

org.rosuda.REngine

REngine

魅惑

org.scala-lang

scala-compiler_2.12

2.12.14

org.scala-lang

scala-library_2.12

2.12.14

org.scala-lang

scala-reflect_2.12

2.12.14

org.scala-lang.modules

scala-collection-compat_2.12

2.4.3

org.scala-lang.modules

scala-parser-combinators_2.12

1.1.2

org.scala-lang.modules

scala-xml_2.12

1.2.0

org.scala-sbt

測試界麵

1.0

org.scalacheck

scalacheck_2.12

1.14.2

org.scalactic

scalactic_2.12

3.0.8

org.scalanlp

breeze-macros_2.12

1.2

org.scalanlp

breeze_2.12

1.2

org.scalatest

scalatest_2.12

3.0.8

org.slf4j

jcl-over-slf4j

1.7.36

org.slf4j

jul-to-slf4j

1.7.36

org.slf4j

slf4j-api

1.7.36

org.spark-project.spark

未使用的

1.0.0

org.threeten

threeten-extra

1.5.0

org.tukaani

xz

1.8

org.typelevel

algebra_2.12

2.0.1

org.typelevel

cats-kernel_2.12

2.1.1

org.typelevel

macro-compat_2.12

1.1.1

org.typelevel

spire-macros_2.12

0.17.0

org.typelevel

spire-Beplay体育安卓版本platform_2.12

0.17.0

org.typelevel

spire-util_2.12

0.17.0

org.typelevel

spire_2.12

0.17.0

org.wildfly.openssl

wildfly-openssl

1.0.7.Final

org.xerial

sqlite-jdbc

3.8.11.2

org.xerial.snappy

snappy-java

1.1.8.4

org.yaml

snakeyaml

1.24

奧羅

奧羅

2.0.8

pl.edu.icm

JLargeArrays

1.5

software.amazon.ion

ion-java

1.0.2中

stax

stax-api

1.0.1