磚13.1運行時

2023年5月磚發布這些圖片。

以下版本注釋提供信息數據磚13.1運行時,由Apache 3.4.0火花。

新特性和改進

新的SQL內置函數

增加了以下功能:

統一目錄支持集群級Python庫

統一目錄庫的使用上有一些局限性。上麵的磚13.1運行時,集群級支持Python庫,包括Python輪子作為工作區文件上傳。引用的庫不支持使用DBFS filepaths,無論是在DBFS DBFS根或外部位置安裝。不支持非python庫。看到集群庫。

磚運行時的13.0及以下、集群級庫不支持在集群中使用共享訪問模式統一Catalog-enabled工作區。

擴展默認啟用優化統一目錄中寫道

默認優化編寫支持δ在統一目錄已經擴大到包括注冊表商品交易顧問基金語句和插入分區表的操作。這種行為將違約SQL倉庫。看到優化為三角洲湖磚。

高級支持結構化流狀態運營商工作負載

現在可以把多個狀態操作串在一起,這意味著你可以養活一個操作的輸出作為另一個窗口的聚合狀態連接等操作。看到優化狀態結構化流查詢。

δ克隆統一目錄是在公共預覽

您現在可以使用淺克隆創建新的統一目錄管理表從現有統一目錄管理表。看到統一目錄管理表淺克隆。

發布/訂閱支持結構化流

您現在可以使用一個內置連接器訂閱Google Pub / Sub結構化流。看到訂閱穀歌Pub / Sub。

減少重複在水印結構化流

您現在可以使用dropDuplicatesWithinWatermark結合特定水印在結構化流閾值刪除處理記錄。看到減少重複在水印。

現在可用觸發運動支持的數據源

您現在可以使用Trigger.AvailableNow消費記錄運動作為增量與結構化流批處理。看到攝取動作記錄作為增量的批處理。

對三角洲的擴展支持轉換從冰山具有截斷分區的表列

您現在可以使用克隆和轉換來δ與冰山截斷的列上定義的表,分區類型int,長,字符串。截斷的列類型小數不受支持。

刪除版本開始

開始版本現在是不讚成改變分享。

新H3表達式可以使用Python

的h3_coverash3和h3_coverash3string表達式是使用Python。

錯誤修複

鑲木地板failOnUnknownFields不再默默地下降的數據類型不匹配

如果一個拚花文件僅僅是閱讀failOnUnknownFields選擇或與自動加載程序failOnNewColumns模式演化模式,具有不同數據類型的列現在失敗,建議使用rescuedDataColumn。自動加載程序現在正確地讀取和不再救援整數,短,或字節類型是否提供這些數據類型之一。鑲木地板文件顯示其他兩種類型。

突發的變化

sqlite-jdbc版本升級到3.42.0.0解決cve - 2023 - 32697

從3.8.11.2 3.42.0.0 sqlite-jdbc升級版本。版本的api 3.42.0.0並不與3.8.11.2完全兼容。如果在代碼中使用sqlite-jdbc,檢查sqlite-jdbc兼容性報告細節。如果你遷移到13.1,使用sqlite,確認您3.42.0.0方法和返回類型版本。

庫升級

  • 升級的Python庫:

    • facets-overview 1.0.3 1.0.2中

    • filelock 3.10.7 3.12.0

    • pyarrow 7.0.0 8.0.0

    • 韌性8.0.1 8.1.0

  • 升級R庫:

  • 升級Java庫:

    • com.github.ben-manes.caffeine。咖啡因是2.3.4 2.9.3

    • org.apache.orc。orc-core從1.8。2-shaded-protobuf to 1.8.3-shaded-protobuf

    • org.apache.orc。orc-mapreduce從1.8。2-shaded-protobuf to 1.8.3-shaded-protobuf

    • org.apache.orc。orc-shims從1.8。2 to 1.8.3

    • org.checkerframework。checker-qual從3.5.0 to 3.19.0

    • org.scalactic.scalactic_2.12 3.0.8 3.2.15

    • org.scalatest.scalatest_2.12 3.0.8 3.2.15

    • org.xerial。sqlite-jdbc從3.8.11.2 to 3.42.0.0

Apache火花

磚13.1運行時包含Apache 3.4.0火花。這個版本包括所有火花修複和改進中磚13.0運行時以及以下額外的bug修複和改進了火花:

  • (火花- 42719)[dbrrm - 199] [sc - 131578]恢複“[sc - 125225] MapOutputTracker # getMap…

  • (火花- 39696)[dbrrm - 166] [sc - 130056](核心)回複(sc - 127830) /

  • (火花- 43331)(sc - 130064)(連接)添加火花SparkSession.interruptAll連接

  • (火花- 16484)[13.1][CHERRY_PICK] [sc - 130076] [SQL]為代表DataSketches使用8位寄存器

  • (火花- 43332)(sc - 130051)(連接)(PYTHON)可以延長ChannelBuilder SparkConnectClient

  • (火花- 43323)PYTHON (sc - 129966) [SQL] [] DataFrame修複。來Pandas with Arrow enabled to handle exceptions properly

  • (火花- 42940)(sc - 129896) [SS][連接]改善流媒體會話管理查詢

  • (火花- 43336)[SQL]之間的鑄造時間戳和TimestampNTZ需要時區

  • (火花- 43032)(sc - 125756][連接][SS]添加流查詢管理器

  • (火花- 16484)(sc - 129975] [SQL]添加支持Datasketches HllSketch

  • (火花- 43260)(sc - 129281] (PYTHON)遷移火花到錯誤類SQL熊貓箭頭類型錯誤。

  • (火花- 41766)(sc - 129964)(核心)處理請求解除之前發送執行人登記

  • (火花- 43307)(sc - 129971] (PYTHON)遷移PandasUDF值錯誤到錯誤類

  • (火花- 43206)(sc - 129903) [SS][連接]StreamingQuery異常()包括堆棧跟蹤

  • (火花- 43311)(sc - 129905) [SS]添加RocksDB狀態存儲提供商內存管理增強功能

  • (火花- 43237)(sc - 129898)(核心)處理零異常事件日誌消息

  • (火花- 43320)(sc - 129899] [SQL][蜂巢]直接調用蜂巢2.3.9 API

  • (火花- 43270)(sc - 129897] (PYTHON)實現__dir__ ()在pyspark.sql.dataframe.DataFrame包括列

  • (火花- 43183)恢複“(sc - 128938) [SS]引入一個新的回調”…

  • (火花- 43143)(sc - 129902) [SS][連接]Scala StreamingQuery awaitTermination ()

  • (火花- 43257)(sc - 129675] [SQL]取代錯誤的類遺產ERROR_TEMP_2022內部錯誤

  • (火花- 43198)(sc - 129470)(連接)修複”不能初始化類亞捫人…”錯誤當使用過濾器

  • (火花- 43165)(sc - 129777] [SQL] canWrite DataTypeUtils

  • (火花- 43298)(sc - 129729] [PYTHON] (ML) predict_batch_udf與標量輸入失敗與批量大小

  • (火花- 43298)(sc - 129700)恢複”(PYTHON) (ML) predict_batch_udf標量輸入失敗批大小的一個“

  • (火花- 43052)(sc - 129663)(核心)處理與零加在事件日誌文件的名字

  • (火花- 43183)(sc - 128938) [SS]引入新的回調StreamingQueryListener“onQueryIdle”

  • (火花- 43209)(sc - 129190)(連接)(PYTHON)遷移到錯誤類表達錯誤

  • (火花- 42151)(sc - 128754] [SQL]使更新作業與表的屬性

  • (火花- 43134)(sc - 129468][連接][SS] JVM客戶StreamingQuery異常()API

  • (火花- 43298)(sc - 129699] [PYTHON] (ML) predict_batch_udf與標量輸入失敗與批量大小

  • (火花- 43248)(sc - 129660] [SQL]不必要的序列化/反序列化的路徑並行收集分區統計數據

  • (火花- 43274)(sc - 129464)[火花- 43275](PYTHON)(連接)介紹PySparkNotImplementedError

  • (火花- 43146)(sc - 128804)(連接)PYTHON實現即時抓取repr和reprhtml_

  • (火花- 42953)(sc - 129469)(連接)(後續)修複maven構建為Scala端UDF測試測試

  • (火花- 43144)(sc - 129280) Scala客戶DataStreamReader表()API

  • (火花- 43136)(sc - 129358)(連接)添加groupByKey + mapGroup + coGroup功能

  • (火花- 43156)(sc - 129672) [sc - 128532] [SQL]修複COUNT (*)是零在相關標量子查詢錯誤

  • (火花- 43046)(sc - 129110) [SS][連接]Python API dropDuplicatesWithinWatermark引發連接實現的

  • (火花- 43199)(sc - 129467] [SQL] InlineCTE冪等

  • (火花- 43293)(sc - 129657] [SQL]__qualified_access_only應該被忽略在正常列

  • (火花- 43276)(sc - 129461)(連接)(PYTHON)遷移引發連接窗口錯誤到錯誤類

  • (火花- 43174)(sc - 129109] [SQL]修複SparkSQLCLIDriver完成者

  • (火花- 43084)(sc - 128654) [SS]添加applyInPandasWithState支持引發連接

  • (火花- 43119)(sc - 129040] [SQL]支持動態SQL關鍵字通過JDBC API和時變濾波

  • (火花- 43082)(sc - 129112)(連接)(PYTHON) Arrow-optimized PYTHON udf引發連接

  • (火花- 43085)(sc - 128432] [SQL]支持列多部分的默認賦值表名

  • (火花- 43156)(sc - 129463)[火花- 43098][SQL]擴展標量子查詢統計錯誤測試decorrelateInnerQuery禁用

  • (火花- 43226)(lc - 671)為文件常數元數據定義提取器

  • (火花- 43210)(sc - 129189)(連接)(PYTHON)介紹PySparkAssertionError

  • (火花- 43214)(sc - 129199] [SQL]文章LocalTableScanExec / CommandResultExec駕駛員一側指標

  • (火花- 43285)(sc - 129347)修複ReplE2ESuite始終沒有與JDK 17

  • (火花- 43268)(sc - 129249] [SQL]時使用適當的錯誤類異常是由一個信息

  • (火花- 43142)(sc - 129299)修複DSL表達式與特殊字符屬性

  • (火花- 43129)(sc - 128896) Scala核心API為流引發連接

  • (火花- 43233)(sc - 129250) [SS]為卡夫卡批量添加日誌閱讀為主題分區,補償範圍和任務ID

  • (火花- 43249)(sc - 129195)(連接)修複缺失數據的SQL命令

  • (火花- 42945)(sc - 129188)(連接)支持PYSPARK_JVM_STACKTRACE_ENABLED引發連接

  • (火花- 43178)PYTHON (sc - 129197)[連接][]PySpark錯誤框架UDF遷移錯誤

  • (火花- 43123)(sc - 128494] [SQL]內部字段元數據不應泄露給目錄

  • (火花- 43217)正確(sc - 129205)遞歸嵌套映射/ findNestedField數組

  • (火花- 43243)(sc - 129294] (PYTHON)(連接)參數為PYTHON printSchema添加水平

  • (火花- 43230)(sc - 129191)(連接)簡化DataFrameNaFunctions.fillna

  • (火花- 43088)(sc - 128403] [SQL]尊重RequiresDistributionAndOrdering cta /區域貿易協定

  • (火花- 43234)(sc - 129192)(連接)(PYTHON)遷移ValueError從連接DataFrame錯誤類

  • (火花- 43212)(sc - 129187) [SS] [PYTHON)遷移到錯誤類結構化流錯誤

  • (火花- 43239)[sc - 129186] [p]刪除null_counts從信息()

  • (火花- 43190)(sc - 128930) [SQL] ListQuery。childOutput應該符合孩子輸出

  • (火花- 43191)(sc - 128924)(核心)代替反射w /直接呼籲Hadoop CallerContext

  • (火花- 43193)(sc - 129042) [SS]刪除工作區hadoop - 12074

  • (火花- 42657)(sc - 128621)(連接)支持查找和傳輸客戶端REPL類文件服務器構件

  • (火花- 43098)(sc - 77059] [SQL]修複正確性計數錯誤當標量子查詢group by子句

  • (火花- 43213)(sc - 129062) (PYTHON)添加DataFrame.offset以香草PySpark

  • (火花- 42982)(sc - 128400)(連接)(PYTHON)修複createDataFrame尊重給定模式ddl

  • (火花- 43124)(sc - 129011) [SQL]數據集。顯示項目CommandResults本地

  • (火花- 42998)(sc - 127422)(連接)(PYTHON)修複DataFrame。收集與零結構

  • (火花- 41498)(sc - 125343)恢複”傳播元數據通過聯盟”

  • (火花- 42960)(sc - 129010][連接][SS]添加await_termination()和異常()API來流在Python中查詢

  • (火花- 42552)(sc - 128824] [SQL]正確antlr語法分析器的兩級解析策略

  • (火花- 43207)(sc - 128937)(連接)添加輔助函數來提取值從字麵表達式

  • (火花- 43186)(sc - 128841) [SQL][蜂巢)消除FileSinkDesc的解決方案

  • (火花- 43107)(sc - 128533) [SQL]合並桶連接應用於廣播連接流

  • (火花- 43195)(sc - 128922)(核心)刪除不必要的序列化HadoopFSUtils包裝器

  • (火花- 43137)(sc - 128828] [SQL]改善ArrayInsert位置是否可折疊和積極的。

  • (火花- 37829)(sc - 128827) [SQL] Dataframe。joinWith外連接為無與倫比的行應該返回一個空值

  • (火花- 43042)(sc - 128602) [SS][連接]()API支持DataStreamReader添加表

  • (火花- 43153)(sc - 128753)(連接)跳過火花dataframe是本地時執行

  • (火花- 43064)(sc - 128496] [SQL]火花SQL CLI SQL選項卡應該隻顯示一次聲明一次

  • (火花- 43126)(sc - 128447] [SQL]兩個蜂巢UDF表達式標記為有狀態

  • (火花- 43111)(sc - 128750] [p][連接](PYTHON)合並嵌套如果聲明成單個如果語句

  • (火花- 43113)(sc - 128749] [SQL]評估溪邊變量生成代碼時的約束條件

  • (火花- 42895)(sc - 127258)(連接)改善停止錯誤消息引發會話

  • (火花- 42884)(sc - 126662)(連接)添加亞捫人REPL集成

  • (火花- 43168)(sc - 128674] [SQL]刪除PhysicalDataType方法從數據類型類

  • (火花- 43121)(sc - 128455] [SQL]使用BytesWritable.copyBytes在“HiveInspectors代替手動複製

  • (火花- 42916)(sc - 128389] [SQL] JDBCTableCatalog保持Char、Varchar元讀

  • (火花- 43050)(sc - 128550] [SQL]解決構建聚合表達式代替分組功能

  • (火花- 43095)(sc - 128549] [SQL]避免曾經為批處理策略的冪等性壞了:推斷出過濾器

  • (火花- 43130)(sc - 128597] [SQL] InternalType PhysicalDataType

  • (火花- 43105)(sc - 128456)(連接)縮寫字節和字符串消息原型

  • (火花- 43099)(sc - 128596] [SQL]使用getName而不是getCanonicalName要構建器類名稱注冊時FunctionRegistry udf

  • (火花- 42994)(sc - 128586] (ML)(連接)PyTorch經銷商支持本地模式

  • (火花- 42859)恢複“(sc - 127935][連接][p]基本支持大熊貓API火花連接”

  • (火花- 43021)(sc - 128472] [SQL]CoalesceBucketsInJoin不能使用AQE時工作

  • (火花- 43125)(sc - 128477)(連接)修複連接零消息服務器無法處理的異常

  • (火花- 43147)(sc - 128594)修複flake8為當地檢查線頭

  • (火花- 43031)(sc - 128360) [SS][連接]使單元測試和doctest流

  • (火花- 43039)(lc - 67)支持文件源_metadata列中的定製字段。

  • (火花- 43120)(sc - 128407) [SS]添加支持跟蹤RocksDB狀態商店的固定塊內存使用量

  • (火花- 43110)(sc - 128381] [SQL] asIntegral PhysicalDataType

  • (火花- 43118)(sc - 128398) [SS]刪除不必要的斷言KafkaMicroBatchStream UninterruptibleThread

  • (火花- 43055)(sc - 128331)(連接)(PYTHON)支持嵌套重複的字段名稱

  • (火花- 42437)(sc - 128339] [PYTHON][連接]PySpark目錄。緩存Table will allow to specify storage level

  • (火花- 42985)(sc - 128332)(連接)(PYTHON)修複createDataFrame尊重SQL配置

  • (火花- 39696)(sc - 127830)(核心)競賽獲得TaskMetrics.externalAccums修複數據

  • (火花- 43103)(sc - 128335] [SQL] PhysicalDataType移動積分

  • (火花- 42741)(sc - 125547] [SQL]不打開投在二進製比較文字為空

  • (火花- 43057)(sc - 127948)(連接)(PYTHON)遷移引發連接列錯誤到錯誤類

  • (火花- 42859)(sc - 127935][連接][p]基本支持大熊貓API引發連接

  • (火花- 43013)(sc - 127773) (PYTHON)遷移ValueError從DataFramePySparkValueError。

  • (火花- 43089)(sc - 128051)(連接)編輯調試UI中的字符串

  • (火花- 43028)(sc - 128070] [SQL] SQL_CONF_NOT_FOUND添加錯誤類

  • (火花- 42999)(sc - 127842)(連接)數據集# foreach foreachPartition

  • (火花- 43066)(sc - 127937] [SQL]添加測試JavaDatasetSuite dropDuplicates

  • (火花- 43075)(sc - 127939)(連接)的變化gRPC來grpcio當它沒有安裝。

  • (火花- 42953)(sc - 127809)(連接)類型的過濾器,地圖,flatMap mapPartitions

  • (火花- 42597)(sc - 125506] [SQL]支持打開日期類型時間戳的類型

  • (火花- 42931)(sc - 127933) [SS] dropDuplicatesWithinWatermark介紹

  • (火花- 43073)(sc - 127943)(連接)添加原型數據類型常量

  • (火花- 43077)(sc - 128050] [SQL]提高UNRECOGNIZED_SQL_TYPE的錯誤消息

  • (火花- 42951)(sc - 128030) [SS][連接]DataStreamReader api

  • (火花- 43049)(sc - 127846] [SQL]使用CLOB代替VARCHAR (255) StringType Oracle JDBC

  • (火花- 43018)(sc - 127762] [SQL]修複bug與時間戳文字插入命令

  • (火花- 42855)(sc - 127722] [SQL]使用運行時在TableOutputResolver null檢查

  • (火花- 43030)(sc - 127847] [SQL]刪除處理關係元數據列

  • (火花- 42993)(sc - 127829] (ML)(連接)使PyTorch經銷商與火花連接兼容

  • (火花- 43058)(sc - 128072] [SQL] PhysicalDataType移動數字和分數

  • (火花- 43056)(sc - 127946) [SS] RocksDB狀態存儲提交應該繼續背景的工作隻有在它停了下來

  • (火花- 43059)(sc - 127947)(連接)(PYTHON)遷移TypeError DataFrame(讀者|作者)錯誤類

  • (火花- 43071)(sc - 128018] [SQL]支持選擇默認順序,極限,抵消插入源關係

  • (火花- 43061)(sc - 127956)(核心)[SQL]介紹PartitionEvaluator SQL操作執行

  • (火花- 43067)(sc - 127938) [SS]正確的位置誤差在卡夫卡連接器類資源文件

  • (火花- 43019)(sc - 127844] [SQL] PhysicalDataType移動順序

  • (火花- 43010)(sc - 127759] (PYTHON)遷移到錯誤類列錯誤

  • (火花- 42840)(sc - 127782] [SQL]變化_LEGACY_ERROR_TEMP_2004錯誤內部錯誤

  • (火花- 43041)(sc - 127765] [SQL]恢複構造函數的異常在連接器API兼容性

  • (火花- 42939)(sc - 127761) [SS](連接)核心流Python API引發連接

  • (火花- 42844)(sc - 127766] [SQL]更新錯誤類_LEGACY_ERROR_TEMP_2008來INVALID_URL

  • (火花- 42316)(sc - 127720) [SQL]命名遺產ERROR_TEMP_2044

  • (火花- 42995)(sc - 127723)(連接)(PYTHON)遷移引發DataFrame錯誤連接到錯誤類

  • (火花- 42983)(sc - 127717)(連接)(PYTHON)修複createDataFrame處理0-dim numpy數組

  • (火花- 42955)(sc - 127476] [SQL]跳過classifyException包裝AnalysisException SparkThrowable

  • (火花- 42949)(sc - 127255] [SQL] NAAJ簡化代碼

  • (火花- 43011)(sc - 127577] [SQL]array_insert失敗與0索引

  • (火花- 42974)(sc - 127487)(核心)恢複Utils.createTempDir使用ShutdownHookManager和清理JavaUtils.createTempDir方法。

  • (火花- 42964)(sc - 127585] [SQL] PosgresDialect“42 p07”也意味著表已經存在

  • (火花- 42978)(sc - 127351) [SQL] Derby&PG:重命名模式名稱不能符合新的表名

  • (火花- 37980)(sc - 127668] [SQL]通過_metadata訪問row_index如果可能在測試中

  • (火花- 42655)(sc - 127591] [SQL]不正確的模糊列引用錯誤

  • (火花- 43009)(sc - 127596) [SQL]參數化sql ()與任何常量

  • (火花- 43026)(sc - 127590] [SQL]應用AQE無論表緩存

  • (火花- 42963)(sc - 127576] [SQL]擴展SparkSessionExtensions AQE注入規則查詢優化器階段

  • (火花- 42918)(sc - 127357)概括FileSourceStrategy處理元數據屬性

  • (火花- 42806)(sc - 127452)[火花- 42811][連接]添加目錄支持

  • (火花- 42997)(sc - 127535] [SQL] TableOutputResolver必須使用正確的列在錯誤消息路徑數組和地圖

  • (火花- 43006)(sc - 127486] [PYSPARK] StorageLevel修複錯誤情商()

  • (火花- 43005)(sc - 127485] [PYSPARK]修複錯誤在PYSPARK /熊貓/ config.py

  • (火花- 43004)(sc - 127457)(核心)修複錯誤ResourceRequest.equals ()

  • (火花- 42907)(sc - 126984)(連接)PYTHON實現Avro功能

  • (火花- 42979)(sc - 127272] [SQL]文字構造函數定義為關鍵字

  • (火花- 42946)(sc - 127252] [SQL]編輯敏感數據由變量替換嵌套

  • (火花- 42952)(sc - 127260] [SQL]簡化分析的參數規則PreprocessTableCreation和DataSourceAnalysis

  • (火花- 42683)(lc - 75)自動重命名衝突的元數據列

  • (火花- 42853)(sc - 126101](後續)解決衝突

  • (火花- 42929)(sc - 126748)(連接)使mapInPandas / mapInArrow支持“is_barrier”

  • (火花- 42968)(sc - 127271) [SS]添加選項跳過提交協調員作為DSv2 StreamingWrite API的一部分源/彙

  • (火花- 42954)(sc - 127261] (PYTHON)(連接)添加YearMonthIntervalTypePySpark和火花Python客戶機連接

  • (火花- 41359)(sc - 127256] [SQL]使用PhysicalDataType而不是在UnsafeRow數據類型

  • (火花- 42873)(sc - 127262] [SQL]火花SQL類型定義為關鍵字

  • (火花- 42808)(sc - 126302)(核心)避免availableProcessors每次MapOutputTrackerMaster # getStatistics

  • (火花- 42937)(sc - 126880] [SQL]PlanSubqueries應該設定InSubqueryExec # shouldBroadcast為真

  • (火花- 42896)PYTHON (sc - 126729) [SQL] []mapInPandas/mapInArrow支持障礙模式執行

  • (火花- 42874)(sc - 126442] [SQL]啟用新的黃金文件對所有輸入文件測試框架進行分析

  • (火花- 42922)(sc - 126850) [SQL]從隨機移動到SecureRandom

  • (火花- 42753)(sc - 126369) ReusedExchange指不存在節點

  • (火花- 40822)(sc - 126274] [SQL]穩定派生列別名

  • (火花- 42908)(sc - 126856] (PYTHON)提高RuntimeError當SparkContext但不需要初始化

  • (火花- 42779)(sc - 126042] [SQL]允許V2寫入顯示谘詢調整分區大小

  • (火花- 42914)(sc - 126727] (PYTHON)重用transformUnregisteredFunction為DistributedSequenceID。

  • (火花- 42878)(sc - 126882)(連接)表API DataFrameReader還可以接受的選擇

  • (火花- 42927)(sc - 126883)(核心)改變的訪問範圍o.a.spark.util.Iterators #大小來私人(util)

  • (火花- 42943)(sc - 126879] [SQL]使用量變而不是文本StringType有效長度

  • (火花- 37677)(sc - 126855)(核心)解壓縮文件權限

  • (火花- 42891)(13。x] [sc - 126458][連接]PYTHON實現CoGrouped地圖API

  • (火花- 41876)(sc - 126849)(連接)(PYTHON)實現DataFrame.toLocalIterator

  • (火花- 42930)(sc - 126761)(核心)[SQL]改變訪問的範圍ProtobufSerDe相關的實現私人(protobuf)

  • (火花- 42819)(sc - 125879) [SS]添加支持設置max_write_buffer_number和write_buffer_size RocksDB用於流媒體

  • (火花- 42924)(sc - 126737] [SQL][連接][PYTHON]明確參數化SQL參數的評論

  • (火花- 42748)(sc - 126455)(連接)服務器端構件管理

  • (火花- 42816)(sc - 126365)(連接)支持最大消息大小為128 mb

  • (火花- 42850)(sc - 126109] [SQL]刪除重複的規則CombineFilters優化器

  • (火花- 42662)(sc - 126355][連接][p]為熊貓API添加典型消息引發違約指數

  • (火花- 42720)(sc - 126136] [p] [SQL]使用表達式distributed-sequence默認索引而不是計劃

  • (火花- 42790)(sc - 126174] [SQL]摘要排除JDBC碼頭工人更好的測試方法測試。

  • (火花- 42900)(sc - 126473)(連接)(PYTHON)修複createDataFrame尊重推理和列的名稱

  • (火花- 42917)(sc - 126657] [SQL]正確getUpdateColumnNullabilityQuery DerbyDialect

  • (火花- 42684)(sc - 125157] [SQL] v2目錄不應該允許默認列的默認值

  • (火花- 42861)(sc - 126635] [SQL]使用私人[SQL]而不是保護[SQL]避免生成API文檔

  • (火花- 42920)PYTHON (sc - 126728)[連接][]使測試與UDT UDF

  • (火花- 42791)(sc - 126617] [SQL]創建一個新的黃金文件測試框架進行分析

  • (火花- 42911)(sc - 126652] (PYTHON)引入更多基本的異常

  • (火花- 42904)(sc - 126634] [SQL] Char、Varchar支持JDBC目錄

  • (火花- 42901)(sc - 126459)(連接)(PYTHON)移動StorageLevel到一個單獨的文件,以避免潛在的文件遞歸地進口

  • (火花- 42894)(sc - 126451)(連接)的支持緩存/堅持/unpersist/storageLevel火花jvm連接客戶端

  • (火花- 42792)(sc - 125852) [SS]添加支持WRITE_FLUSH_BYTES RocksDB用於流狀態

  • (火花- 41233)(sc - 126441)(連接)(PYTHON)添加array_prepend火花PYTHON客戶機連接

  • (火花- 42681)(sc - 125149] [SQL]放鬆點約束改變表添加|取代列描述符

  • (火花- 42889)(sc - 126367)(連接)(PYTHON)實現緩存,持續下去,unpersist, storageLevel

  • (火花- 42824)(sc - 125985)(連接)(PYTHON)不支持JVM屬性提供一個清晰的錯誤消息

  • (火花- 42340)(sc - 126131)(連接)PYTHON實現分組地圖API

  • (火花- 42892)(sc - 126454] [SQL] sameType和相關方法的數據類型

  • (火花- 42827)(sc - 126126)(連接)的支持功能# array_prependScala連接客戶端

  • (火花- 42823)(sc - 125987] [SQL]spark-sqlshell支持初始化的多部分名稱空間

  • (火花- 42817)(sc - 125960)(核心)記錄在ApplicationMaster洗牌服務名稱一次

  • (火花- 42786)(sc - 126438)(連接)類型的選擇

  • (火花- 42800)PYTHON (sc - 125868)[連接][](ML)實現毫升函數{array_to_vector,vector_to_array}

  • (火花- 42052)(sc - 126439] [SQL] Codegen HiveSimpleUDF支持

  • (火花- 41233)(sc - 126110] [SQL] [PYTHON]添加array_prepend函數

  • (火花- 42864)(sc - 126268] [ML] [3.4]IsotonicRegression.PointsAccumulator私人

  • (火花- 42876)(sc - 126281] [SQL]數據類型的physicalDataType應該私人[SQL]

  • (火花- 42101)(sc - 125437] [SQL]使InMemoryTableScanExec AQE支持

  • (火花- 41290)(sc - 124030] [SQL]支持生成始終作為創建/替換表中的列的表達式語句

  • (火花- 42870)(sc - 126220)(連接)toCatalystValue來connect-common

  • (火花- 42247)(sc - 126107)(連接)(PYTHON)修複UserDefinedFunction returnType

  • (火花- 42875)(sc - 126258)(連接)(PYTHON)修複toPandas妥善處理時區和地圖類型

  • (火花- 42757)(sc - 125626)(連接)為DataFrameReader實現文本文件

  • (火花- 42803)(sc - 126081)(核心)[SQL] (ML)使用getParameterCount函數代替getParameterTypes.length

  • (火花- 42833)(sc - 126043) [SQL]重構applyExtensions在SparkSession

  • (火花- 41765)恢複“(sc - 123550] [SQL]退出v1寫指標…

  • (火花- 42848)(sc - 126105)(連接)(PYTHON)實現DataFrame.registerTempTable

  • (火花- 42020)(sc - 126103)(連接)(PYTHON)支持UserDefinedType引發連接

  • (火花- 42818)(sc - 125861)(連接)(PYTHON)實現DataFrameReader / Writer.jdbc

  • (火花- 42812)(sc - 125867)(連接)添加client_type AddArtifactsRequest protobuf消息

  • (火花- 42772)(sc - 125860] [SQL]改變對壓低JDBC選項的默認值為true

  • (火花- 42771)(sc - 125855] [SQL]重構HiveGenericUDF

  • (火花- 25050)(sc - 123839) [SQL] Avro:編寫複雜的工會

  • (火花- 42765)(sc - 125850)(連接)(PYTHON)允許進口pandas_udf從pyspark.sql.connect.functions

  • (火花- 42719)(sc - 125225)(核心)MapOutputTracker # getMapLocation應該尊重spark.shuffle.reduceLocality.enabled

  • (火花- 42480)(sc - 125173] [SQL]提高下降的性能分區

  • (火花- 42689)(sc - 125195)(核心)(SHUFFLE)允許ShuffleDriverComponent聲明如果洗牌數據被可靠地存儲

  • (火花- 42726)(sc - 125279)(連接)(PYTHON)實現DataFrame.mapInArrow

  • (火花- 41765)(sc - 123550] [SQL]退出v1給writefile指標

  • (火花- 41171)(sc - 124191] [SQL]推斷,如果partitionSpec壓低窗口限製通過窗口是空的

  • (火花- 42686)(sc - 125292)(核心)推遲格式化TaskMemoryManager調試消息

  • (火花- 42756)(sc - 125443)(連接)(PYTHON) Helper函數原型文字轉換為PYTHON客戶機的價值

  • (火花- 42793)(sc - 125627)(連接)連接模塊需要build_profile_flags

  • (火花- 42701)(sc - 125192) [SQL]添加try_aes_decrypt ()函數

  • (火花- 42679)PYTHON (sc - 125438)[連接][]createDataFrame不與非空模式

  • (火花- 42733)(sc - 125542)(連接)(後續)寫沒有路徑或表

  • (火花- 42777)(sc - 125525] [SQL]支持TimestampNTZ編目統計數據轉化為計劃統計數據

  • (火花- 42770)(sc - 125558)(連接)添加truncatedTo (ChronoUnit.MICROS)為了使SQLImplicitsTestSuite在Java 17日報GA任務通過測試

  • (火花- 42752)(sc - 125550] [PYSPARK] [SQL]使PYSPARK異常可打印在初始化期間

  • (火花- 42732)(sc - 125544] [PYSPARK][連接]支持火花連接會話getActiveSession方法

  • (火花- 42755)(sc - 125442)(連接)因素文字值轉換了connect-common

  • (火花- 42747)(sc - 125399] (ML)修複錯誤的鹵到船尾的內部狀態

  • (火花- 42740)(sc - 125439] [SQL]修複bug,疊加抵消一些內置的方言或分頁無效

  • (火花- 42745)(sc - 125332] [SQL]改善AliasAwareOutputExpression與DSv2一起工作

  • (火花- 42743)(sc - 125330] [SQL]支持分析TimestampNTZ列

  • (火花- 42721)(sc - 125371)(連接)RPC記錄攔截器

  • (火花- 42691)(sc - 125397)(連接)(PYTHON)實現Dataset.semanticHash

  • (火花- 42688)(sc - 124922)(連接)重命名連接原型請求client_id session_id

  • (火花- 42310)(sc - 122792) [SQL]命名遺產ERROR_TEMP_1289

  • (火花- 42685)(sc - 125339)(核心)優化跑龍套。bytesToString例程

  • (火花- 42725)PYTHON (sc - 125296)[連接][]使LiteralExpression支持數組參數

  • (火花- 42702)(sc - 125293)[火花- 42623][SQL]支持參數化查詢子查詢和CTE

  • (火花- 42697)(sc - 125189] [WEBUI]修複/ api / v1 /應用程序期間返回總運行時間而不是0

  • (火花- 42733)(sc - 125278)(連接)(PYTHON)修複DataFrameWriter。沒有路徑參數保存到工作

  • (火花- 42376)(sc - 124928) [SS]介紹水印運營商之間的傳播

  • (火花- 42710)(sc - 125205)(連接)(PYTHON)重命名FrameMap MapPartitions原型

  • (火花- 37099)(sc - 123542] [SQL]介紹窗口的組限製rank-based濾波器優化top-k計算

  • (火花- 42630)PYTHON (sc - 125207)[連接][]介紹UnparsedDataType和推遲解析DDL字符串直到SparkConnectClient可用

  • (火花- 42690)(sc - 125193)(連接)為Scala客戶機實現CSV / JSON解析函數

  • (火花- 42709)(sc - 125172] (PYTHON)刪除的假設__file__是可用的

  • (火花- 42318)(sc - 122648)[火花- 42319][SQL]命名遺產ERROR_TEMP_ (2123 | 2125)

  • (火花- 42723)(sc - 125183] [SQL]支持json解析器數據類型“timestamp_ltz”TimestampType

  • (火花- 42722)PYTHON (sc - 125175)[連接][]PYTHON def連接模式()不應該緩存模式

  • (火花- 42643)(sc - 125152)(連接)(PYTHON)注冊Java用戶定義函數(聚合)

  • (火花- 42656)(sc - 125177)(連接)(後續)修複spark-connect腳本

  • (火花- 41516)(sc - 123899] [SQL]允許jdbc方言覆蓋查詢用於創建一個表

  • (火花- 41725)(sc - 124396)(連接)渴望執行DF.sql ()

  • (火花- 42687)(sc - 124896) [SS] unsupport更好的錯誤消息主操作流

  • (火花- 42676)(sc - 124809) [SS]寫臨時檢查站流查詢本地文件係統即使違約FS設置不同

  • (火花- 42303)(sc - 122644) [SQL]命名遺產ERROR_TEMP_1326

  • (火花- 42553)(sc - 124560] [SQL]確保至少一個時間單位“間隔”後

  • (火花- 42649)(sc - 124576)(核心)刪除標準Apache許可頭從第三方源文件

  • (火花- 42611)(sc - 124395] [SQL]插入char、varchar長度檢查內部字段在決議

  • (火花- 42419)(sc - 124019)(連接)(PYTHON)遷移到錯誤引發連接列的框架API。

  • (火花- 42637)(sc - 124522)(連接)添加SparkSession.stop ()

  • (火花- 42647)(sc - 124647] (PYTHON)改變為numpy棄用和刪除類型別名

  • (火花- 42616)(sc - 124389] [SQL] SparkSQLCLIDriver隻接近蜂巢sessionState開始

  • (火花- 42593)(sc - 124405] [p]輕視&刪除在熊貓2.0的api將被刪除。

  • (火花- 41870)(sc - 124402)(連接)(PYTHON)修複createDataFrame處理重複的列名

  • (火花- 42569)(sc - 124379)(連接)拋出異常不支持會話API

  • (火花- 42631)(sc - 124526)(連接)支持自定義擴展Scala中的客戶端

  • (火花- 41868)(sc - 124387)(連接)(PYTHON)修複createDataFrame支持持續時間

  • (火花- 42572)(sc - 124171] [SQL] [SS] StateStoreProvider.validateStateRowFormat修複行為

維護更新

看到磚13.1運行時的維護更新。

係統環境

  • 操作係統:Ubuntu 22.04.2 LTS

  • Java:祖魯8.70.0.23-CA-linux64

  • Scala:2.12.15

  • Python:3.10.6

  • R:4.2.2

  • 三角洲湖:測試盒框

安裝Python庫

圖書館

版本

圖書館

版本

圖書館

版本

appdirs

1.4.4

argon2-cffi

21.3.0

argon2-cffi-bindings

21.2.0

asttokens

2.2.1

attrs

21.4.0

backcall

0.2.0

beautifulsoup4

4.11.1

黑色的

22.6.0

漂白劑

4.1.0

信號燈

1.4

boto3

1.24.28

botocore

1.27.28

certifi

2022.9.14

cffi

1.15.1

chardet

4.0.0

charset-normalizer

2.0.4

點擊

8.0.4

密碼學

37.0.1

周期計

0.11.0

Cython

0.29.32

dbus-python

1.2.18

debugpy

1.5.1

裝飾

5.1.1

defusedxml

是0.7.1

distlib

0.3.6

docstring-to-markdown

0.12

entrypoints

0.4

執行

1.2.0

facets-overview

1.0.3

fastjsonschema

2.16.3

filelock

3.12.0

fonttools

4.25.0

googleapis-common-protos

1.56.4

grpcio

1.48.1

grpcio-status

1.48.1

httplib2

0.20.2

idna

3.3

importlib-metadata

4.6.4

ipykernel

6.17.1

ipython

8.10.0

ipython-genutils

0.2.0

ipywidgets

7.7.2

絕地武士

0.18.1

吉普車

是0.7.1

Jinja2

14

jmespath

0.10.0

joblib

1.2.0

jsonschema

4.16.0

jupyter-client

7.3.4

jupyter_core

4.11.2

jupyterlab-pygments

0.1.2

jupyterlab-widgets

1.0.0

密匙環

23.5.0

kiwisolver

1.4.2

launchpadlib

1.10.16

lazr.restfulclient

0.14.4

lazr.uri

1.0.6

MarkupSafe

2.0.1

matplotlib

3.5.2

matplotlib-inline

0.1.6

麥凱布

0.7.0

使走調

0.8.4

more-itertools

8.10.0

mypy-extensions

0.4.3

nbclient

0.5.13

nbconvert

6.4.4

nbformat

發送的

nest-asyncio

1.5.5

nodeenv

1.7.0

筆記本

6.4.12

numpy

1.21.5

oauthlib

3.2.0

包裝

21.3

熊貓

1.4.4

pandocfilters

1.5.0

parso

0.8.3

pathspec

0.9.0

容易受騙的人

0.5.2

pexpect

4.8.0

pickleshare

0.7.5

枕頭

9.2.0

皮普

22.2.2

Beplay体育安卓版本platformdirs

2.5.2

情節

5.9.0

pluggy

1.0.0

prometheus-client

0.14.1

prompt-toolkit

3.0.36

protobuf

3.19.4

psutil

5.9.0

psycopg2

2.9.3

ptyprocess

0.7.0

pure-eval

0.2.2

pyarrow

8.0.0

pycparser

2.21

pydantic

1.10.6

pyflakes

3.0.1

Pygments

2.11.2

PyGObject

3.42.1

PyJWT

tripwire

pyodbc

4.0.32

pyparsing

3.0.9

pyright

1.1.294

pyrsistent

0.18.0

python-dateutil

2.8.2

python-lsp-jsonrpc

1.0.0

python-lsp-server

1.7.1上

pytoolconfig

1.2.2

pytz

2022.1

pyzmq

23.2.0

請求

2.28.1

繩子

1.7.0

s3transfer

0.6.0

scikit-learn

1.1.1

scipy

1.9.1

seaborn

0.11.2

SecretStorage

3.3.1

Send2Trash

1.8.0

setuptools

63.4.1

六個

1.16.0

soupsieve

2.3.1

ssh-import-id

5.11

堆棧數據

0.6.2

statsmodels

0.13.2

韌性

8.1.0

terminado

0.13.1

testpath

0.6.0

threadpoolctl

2.2.0

tokenize-rt

4.2.1

tomli

2.0.1

龍卷風

6.1

traitlets

5.1.1

typing_extensions

4.3.0

ujson

5.4.0

unattended-upgrades

0.1

urllib3

1.26.11

virtualenv

20.16.3

wadllib

1.3.6

wcwidth

0.2.5

webencodings

0.5.1

whatthepatch

1.0.2中

輪

0.37.1

widgetsnbextension

3.6.1

yapf

0.31.0

氧化鋅碘仿糊

1.0.0

安裝R庫

R庫的安裝微軟在2023-02-10凹口快照。

圖書館

版本

圖書館

版本

圖書館

版本

箭頭

10.0.1

askpass

1.1

為了

0.2.1

補丁

1.4.1

基地

4.2.2

base64enc

0.1 - 3

位

你

bit64

你

團

1.2.3

引導

-28 - 1.3

釀造

1.0 8

生動

1.1.3

掃帚

1.0.3

bslib

0.4.2

cachem

1.0.6

callr

3.7.3

脫字符號

-93 - 6.0

cellranger

1.1.0

時間

-59 - 2.3

類

-21 - 7.3

cli

3.6.0

clipr

0.8.0

時鍾

0.6.1

集群

2.1.4

codetools

-19 - 0.2

色彩

2.1 0

commonmark

1.8.1

編譯器

4.2.2

配置

0.3.1

cpp11

0.4.3

蠟筆

1.5.2

憑證

1.3.2

旋度

5.0.0

data.table

1.14.6

數據集

4.2.2

DBI

1.1.3

dbplyr

tripwire

desc

1.4.2

devtools

2.4.5

diffobj

0.3.5

消化

0.6.31

downlit

0.4.2

dplyr

1.1.0

dtplyr

1.2.2

e1071

-13 - 1.7

省略

0.3.2

評估

0.20

fansi

1.0.4

farver

2.1.1

fastmap

1.1.0

fontawesome

0.5.0

forcats

1.0.0

foreach

1.5.2

外國

-82 - 0.8

打造

0.2.0

fs

1.6.1

未來

1.31.0

future.apply

1.10.0

含漱劑

1.3.0

泛型

0.1.3

哥特

1.9.2

ggplot2

3.4.0

“大酒店”

1.3.1

gitcreds

0.1.2

glmnet

4.1 6

全局變量

0.16.2

膠水

1.6.2

googledrive

2.0.0

googlesheets4

1.0.1

高爾

1.0.1

圖形

4.2.2

grDevices

4.2.2

網格

4.2.2

gridExtra

2.3

gsubfn

0.7

gtable

0.3.1

需要戴安全帽的

1.2.0

還

2.5.1

highr

0.10

hms

1.1.2

htmltools

0.5.4

htmlwidgets

1.6.1

httpuv

1.6.8

httr

1.4.4

id

1.0.1

ini

0.3.1

不小

-13 - 0.9

isoband

0.2.7

迭代器

1.0.14

jquerylib

0.1.4

jsonlite

1.8.4

KernSmooth

-20 - 2.23

knitr

1.42

標簽

0.4.2

晚些時候

1.3.0

晶格

-45 - 0.20

熔岩

1.7.1上

生命周期

1.0.3

listenv

0.9.0

lubridate

1.9.1

magrittr

2.0.3

減價

1.5

質量

7.3 - -58.2

矩陣

1.5 - 1

memoise

2.0.1

方法

4.2.2

mgcv

-41 - 1.8

mime

0.12

miniUI

0.1.1.1

ModelMetrics

1.2.2.2

modelr

0.1.10

孟塞爾

0.5.0

nlme

-162 - 3.1

nnet

-18 - 7.3

numDeriv

2016.8 - -1.1

openssl

2.0.5

平行

4.2.2

平行

1.34.0

支柱

1.8.1

pkgbuild

1.4.0

pkgconfig

2.0.3

pkgdown

2.0.7

pkgload

1.3.2

plogr

0.2.0

plyr

1.8.8

讚美

1.0.0

prettyunits

1.1.1

pROC

1.18.0

processx

3.8.0

prodlim

2019.11.13

profvis

0.3.7

進步

1.2.2

progressr

0.13.0

承諾

1.2.0.1

原型

1.0.0

代理

-27 - 0.4

ps

1.7.2

purrr

1.0.1

r2d3

0.2.6雖然隻是

R6

2.5.1

ragg

1.2.5

randomForest

4.7 - -1.1

rappdirs

0.3.3

rcmdcheck

1.4.0

RColorBrewer

1.1 - 3

Rcpp

1.0.10

RcppEigen

0.3.3.9.3

readr

2.1.3

readxl

1.4.2

食譜

1.0.4

複賽

1.0.1

rematch2

2.1.2

遙控器

2.4.2

reprex

2.0.2

reshape2

1.4.4

rlang

1.0.6

rmarkdown

2.20

RODBC

-20 - 1.3

roxygen2

7.2.3

rpart

4.1.19

rprojroot

2.0.3

Rserve

-12 - 1.8

RSQLite

2.2.20

rstudioapi

0.14

rversions

2.1.2

房車

1.0.3

薩斯

0.4.5

尺度

1.2.1 "

selectr

0.4 - 2

sessioninfo

1.2.2

形狀

1.4.6

閃亮的

1.7.4

sourcetools

0.1.7-1

sparklyr

1.7.9

SparkR

3.4.0

空間

-15 - 7.3

樣條函數

4.2.2

sqldf

-11 - 0.4

SQUAREM

2021.1

統計數據

4.2.2

stats4

4.2.2

stringi

1.7.12

stringr

1.5.0

生存

3.5 - 3

sys

3.4.1

systemfonts

1.0.4

tcltk

4.2.2

testthat

3.1.6

textshaping

0.3.6

寵物貓

3.1.8中

tidyr

1.3.0

tidyselect

1.2.0

tidyverse

1.3.2

timechange

0.2.0

timeDate

4022.108

tinytex

0.44

工具

4.2.2

tzdb

0.3.0

urlchecker

1.0.1

usethis

2.1.6

use utf8

1.2.3

跑龍套

4.2.2

uuid

1.1 0

vctrs

0.5.2

viridisLite

0.4.1

發嗚嗚聲

1.6.1

沃爾多

0.4.0

晶須

0.4.1

withr

2.5.0

xfun

0.37

xml2

1.3.3

xopen

1.0.0

xtable

1.8 - 4

yaml

2.3.7

郵政編碼

2.2.2

安裝了Java和Scala庫(Scala 2.12集群版)

組ID

工件ID

版本

antlr

antlr

2.7.7

com.amazonaws

amazon-kinesis-client

1.12.0

com.amazonaws

aws-java-sdk-autoscaling

1.12.390

com.amazonaws

aws-java-sdk-cloudformation

1.12.390

com.amazonaws

aws-java-sdk-cloudfront

1.12.390

com.amazonaws

aws-java-sdk-cloudhsm

1.12.390

com.amazonaws

aws-java-sdk-cloudsearch

1.12.390

com.amazonaws

aws-java-sdk-cloudtrail

1.12.390

com.amazonaws

aws-java-sdk-cloudwatch

1.12.390

com.amazonaws

aws-java-sdk-cloudwatchmetrics

1.12.390

com.amazonaws

aws-java-sdk-codedeploy

1.12.390

com.amazonaws

aws-java-sdk-cognitoidentity

1.12.390

com.amazonaws

aws-java-sdk-cognitosync

1.12.390

com.amazonaws

aws-java-sdk-config

1.12.390

com.amazonaws

aws-java-sdk-core

1.12.390

com.amazonaws

aws-java-sdk-datapipeline

1.12.390

com.amazonaws

aws-java-sdk-directconnect

1.12.390

com.amazonaws

aws-java-sdk-directory

1.12.390

com.amazonaws

aws-java-sdk-dynamodb

1.12.390

com.amazonaws

aws-java-sdk-ec2

1.12.390

com.amazonaws

aws-java-sdk-ecs

1.12.390

com.amazonaws

aws-java-sdk-efs

1.12.390

com.amazonaws

aws-java-sdk-elasticache

1.12.390

com.amazonaws

aws-java-sdk-elasticbeanstalk

1.12.390

com.amazonaws

aws-java-sdk-elasticloadbalancing

1.12.390

com.amazonaws

aws-java-sdk-elastictranscoder

1.12.390

com.amazonaws

aws-java-sdk-emr

1.12.390

com.amazonaws

aws-java-sdk-glacier

1.12.390

com.amazonaws

aws-java-sdk-glue

1.12.390

com.amazonaws

aws-java-sdk-iam

1.12.390

com.amazonaws

aws-java-sdk-importexport

1.12.390

com.amazonaws

aws-java-sdk-kinesis

1.12.390

com.amazonaws

aws-java-sdk-kms

1.12.390

com.amazonaws

aws-java-sdk-lambda

1.12.390

com.amazonaws

aws-java-sdk-logs

1.12.390

com.amazonaws

aws-java-sdk-machinelearning

1.12.390

com.amazonaws

aws-java-sdk-opsworks

1.12.390

com.amazonaws

aws-java-sdk-rds

1.12.390

com.amazonaws

aws-java-sdk-redshift

1.12.390

com.amazonaws

aws-java-sdk-route53

1.12.390

com.amazonaws

aws-java-sdk-s3

1.12.390

com.amazonaws

aws-java-sdk-ses

1.12.390

com.amazonaws

aws-java-sdk-simpledb

1.12.390

com.amazonaws

aws-java-sdk-simpleworkflow

1.12.390

com.amazonaws

aws-java-sdk-sns

1.12.390

com.amazonaws

aws-java-sdk-sqs

1.12.390

com.amazonaws

aws-java-sdk-ssm

1.12.390

com.amazonaws

aws-java-sdk-storagegateway

1.12.390

com.amazonaws

aws-java-sdk-sts

1.12.390

com.amazonaws

aws-java-sdk-support

1.12.390

com.amazonaws

aws-java-sdk-swf-libraries

1.11.22

com.amazonaws

aws-java-sdk-workspaces

1.12.390

com.amazonaws

jmespath-java

1.12.390

com.clearspring.analytics

流

2.9.6

com.databricks

Rserve

1.8 - 3

com.databricks

jets3t

0.7.1-0

com.databricks.scalapb

compilerplugin_2.12

0.4.15-10

com.databricks.scalapb

scalapb-runtime_2.12

0.4.15-10

com.esotericsoftware

kryo-shaded

4.0.2

com.esotericsoftware

minlog

1.3.0

com.fasterxml

同學

1.3.4

com.fasterxml.jackson.core

jackson-annotations

2.14.2

com.fasterxml.jackson.core

jackson-core

2.14.2

com.fasterxml.jackson.core

jackson-databind

2.14.2

com.fasterxml.jackson.dataformat

jackson-dataformat-cbor

2.14.2

com.fasterxml.jackson.datatype

jackson-datatype-joda

2.14.2

com.fasterxml.jackson.datatype

jackson-datatype-jsr310

2.13.4

com.fasterxml.jackson.module

jackson-module-paranamer

2.14.2

com.fasterxml.jackson.module

jackson-module-scala_2.12

2.14.2

com.github.ben-manes.caffeine

咖啡因

2.9.3

com.github.fommil

jniloader

1.1

com.github.fommil.netlib

native_ref-java

1.1

com.github.fommil.netlib

native_ref-java

1.1人

com.github.fommil.netlib

native_system-java

1.1

com.github.fommil.netlib

native_system-java

1.1人

com.github.fommil.netlib

netlib-native_ref-linux-x86_64

1.1人

com.github.fommil.netlib

netlib-native_system-linux-x86_64

1.1人

com.github.luben

zstd-jni

1.5.2-5

com.github.wendykierp

JTransforms

3.1

com.google.code.findbugs

jsr305

3.0.0

com.google.code.gson

gson

2.8.9

com.google.crypto.tink

叮叮鈴

1.7.0

com.google.errorprone

error_prone_annotations

2.10.0

com.google.flatbuffers

flatbuffers-java

1.12.0

com.google.guava

番石榴

15.0

com.google.protobuf

protobuf-java

2.6.1

com.h2database

h2

2.1.214

com.helger

分析器

1.1.1

com.jcraft

jsch

0.1.55

com.jolbox

bonecp

0.8.0.RELEASE

com.lihaoyi

sourcecode_2.12

0.1.9

com.microsoft.azure

azure-data-lake-store-sdk

2.3.9

com.microsoft.sqlserver

mssql-jdbc

11.2.2.jre8

com.ning

compress-lzf

1.1.2

com.sun.mail

javax.mail

1.5.2

com.sun.xml.bind

jaxb-core

. 2.2.11

com.sun.xml.bind

jaxb-impl

. 2.2.11

com.tdunning

json

1.8

com.thoughtworks.paranamer

paranamer

2.8

com.trueaccord.lenses

lenses_2.12

0.4.12

com.twitter

chill-java

0.10.0

com.twitter

chill_2.12

0.10.0

com.twitter

util-app_2.12

7.1.0

com.twitter

util-core_2.12

7.1.0

com.twitter

util-function_2.12

7.1.0

com.twitter

util-jvm_2.12

7.1.0

com.twitter

util-lint_2.12

7.1.0

com.twitter

util-registry_2.12

7.1.0

com.twitter

util-stats_2.12

7.1.0

com.typesafe

配置

1.2.1 "

com.typesafe.scala-logging

scala-logging_2.12

3.7.2章

com.uber

h3

3.7.0

com.univocity

univocity-parsers

2.9.1

com.zaxxer

HikariCP

4.0.3

commons-cli

commons-cli

1.5.0

commons-codec

commons-codec

1.15

commons-collections

commons-collections

3.2.2

commons-dbcp

commons-dbcp

1.4

commons-fileupload

commons-fileupload

1.5

commons-httpclient

commons-httpclient

3.1

commons-io

commons-io

2.11.0

commons lang

commons lang

2.6

通用日誌

通用日誌

1.1.3

commons-pool

commons-pool

1.5.4

dev.ludovic.netlib

arpack

3.0.3

dev.ludovic.netlib

布拉斯特區

3.0.3

dev.ludovic.netlib

lapack

3.0.3

info.ganglia.gmetric4j

gmetric4j

1.0.10

io.airlift

aircompressor

0.21

io.delta

delta-sharing-spark_2.12

0.6.4

io.dropwizard.metrics

metrics-core

4.2.10

io.dropwizard.metrics

metrics-graphite

4.2.10

io.dropwizard.metrics

metrics-healthchecks

4.2.10

io.dropwizard.metrics

metrics-jetty9

4.2.10

io.dropwizard.metrics

metrics-jmx

4.2.10

io.dropwizard.metrics

metrics-json

4.2.10

io.dropwizard.metrics

metrics-jvm

4.2.10

io.dropwizard.metrics

metrics-servlets

4.2.10

io.netty

netty-all

4.1.87.Final

io.netty

netty-buffer

4.1.87.Final

io.netty

netty-codec

4.1.87.Final

io.netty

netty-codec-http

4.1.87.Final

io.netty

netty-codec-http2

4.1.87.Final

io.netty

netty-codec-socks

4.1.87.Final

io.netty

netty-common

4.1.87.Final

io.netty

netty-handler

4.1.87.Final

io.netty

netty-handler-proxy

4.1.87.Final

io.netty

netty-resolver

4.1.87.Final

io.netty

netty-transport

4.1.87.Final

io.netty

netty-transport-classes-epoll

4.1.87.Final

io.netty

netty-transport-classes-kqueue

4.1.87.Final

io.netty

netty-transport-native-epoll

4.1.87.Final

io.netty

netty-transport-native-epoll

4.1.87.Final-linux-aarch_64

io.netty

netty-transport-native-epoll

4.1.87.Final-linux-x86_64

io.netty

netty-transport-native-kqueue

4.1.87.Final-osx-aarch_64

io.netty

netty-transport-native-kqueue

4.1.87.Final-osx-x86_64

io.netty

netty-transport-native-unix-common

4.1.87.Final

io.prometheus

simpleclient

0.7.0

io.prometheus

simpleclient_common

0.7.0

io.prometheus

simpleclient_dropwizard

0.7.0

io.prometheus

simpleclient_pushgateway

0.7.0

io.prometheus

simpleclient_servlet

0.7.0

io.prometheus.jmx

收集器

0.12.0

jakarta.annotation

jakarta.annotation-api

1.3.5

jakarta.servlet

jakarta.servlet-api

4.0.3

jakarta.validation

jakarta.validation-api

2.0.2

jakarta.ws.rs

jakarta.ws.rs-api

2.1.6

javax.activation

激活

1.1.1

javax.el

javax.el-api

2.2.4

javax.jdo

jdo api

3.0.1

javax.transaction

jta

1.1

javax.transaction

事務api

1.1

javax.xml.bind

jaxb-api

. 2.2.11

javolution

javolution

5.5.1

jline

jline

2.14.6

joda-time

joda-time

2.12.1

ml.combust.mleap

mleap-databricks-runtime_2.12

v0.20.0-db2

net.java.dev.jna

jna

5.8.0

net.razorvine

泡菜

1.3

net.sf.jpam

jpam

1.1

net.sf.opencsv

opencsv

2.3

net.sf.supercsv

super-csv

2.2.0

net.snowflake

snowflake-ingest-sdk

0.9.6

net.snowflake

snowflake-jdbc

3.13.22

net.sourceforge.f2j

arpack_combined_all

0.1

org.acplt.remotetea

remotetea-oncrpc

1.1.2

org.antlr

ST4

4.0.4

org.antlr

antlr-runtime

3.5.2

org.antlr

antlr4-runtime

4.9.3

org.antlr

stringtemplate

3.2.1之上

org.apache.ant

螞蟻

1.9.16

org.apache.ant

ant-jsch

1.9.16

org.apache.ant

ant-launcher

1.9.16

org.apache.arrow

arrow-format

11.0.0

org.apache.arrow

arrow-memory-core

11.0.0

org.apache.arrow

arrow-memory-netty

11.0.0

org.apache.arrow

arrow-vector

11.0.0

org.apache.avro

avro

1.11.1

org.apache.avro

avro-ipc

1.11.1

org.apache.avro

avro-mapred

1.11.1

org.apache.commons

commons-collections4

4.4

org.apache.commons

commons-compress

1.21

org.apache.commons

commons-crypto

1.1.0

org.apache.commons

commons-lang3

3.12.0

org.apache.commons

commons-math3

3.6.1

org.apache.commons

commons-text

1.10.0

org.apache.curator

curator-client

2.13.0

org.apache.curator

curator-framework

2.13.0

org.apache.curator

curator-recipes

2.13.0

org.apache.datasketches

datasketches-java

3.1.0

org.apache.datasketches

datasketches-memory

2.0.0

org.apache.derby

德比

10.14.2.0

org.apache.hadoop

hadoop-client-runtime

3.3.4

org.apache.hive

hive-beeline

2.3.9

org.apache.hive

hive-cli

2.3.9

org.apache.hive

hive-jdbc

2.3.9

org.apache.hive

hive-llap-client

2.3.9

org.apache.hive

hive-llap-common

2.3.9

org.apache.hive

hive-serde

2.3.9

org.apache.hive

hive-shims

2.3.9

org.apache.hive

hive-storage-api

2.8.1發布

org.apache.hive.shims

蜂巢0.23 -墊片

2.3.9

org.apache.hive.shims

hive-shims-common

2.3.9

org.apache.hive.shims

hive-shims-scheduler

2.3.9

org.apache.httpcomponents

httpclient

4.5.14

org.apache.httpcomponents

httpcore

4.4.16

org.apache.ivy

艾薇

2.5.1

org.apache.logging.log4j

log4j - 1.2 api

2.19.0

org.apache.logging.log4j

log4j api

2.19.0

org.apache.logging.log4j

log4j-core

2.19.0

org.apache.logging.log4j

log4j-slf4j2-impl

2.19.0

org.apache.mesos

便

1.11.0-shaded-protobuf

org.apache.orc

orc-core

1.8.3-shaded-protobuf

org.apache.orc

orc-mapreduce

1.8.3-shaded-protobuf

org.apache.orc

orc-shims

1.8.3

org.apache.thrift

libfb303

0.9.3

org.apache.thrift

libthrift

0.12.0

org.apache.xbean

xbean-asm9-shaded

4.22

org.apache.yetus

audience-annotations

0.13.0

org.apache.zookeeper

動物園管理員

3.6.3

org.apache.zookeeper

zookeeper-jute

3.6.3

org.checkerframework

checker-qual

3.19.0

org.codehaus.jackson

jackson-core-asl

1.9.13

org.codehaus.jackson

jackson-mapper-asl

1.9.13

org.codehaus.janino

commons-compiler

3.0.16

org.codehaus.janino

janino

3.0.16

org.datanucleus

datanucleus-api-jdo

4.2.4

org.datanucleus

datanucleus-core

4.1.17

org.datanucleus

datanucleus-rdbms

4.1.19

org.datanucleus

javax.jdo

3.2.0-m3

org.eclipse.jetty

jetty-client

9.4.50.v20221201

org.eclipse.jetty

jetty-continuation

9.4.50.v20221201

org.eclipse.jetty

jetty-http

9.4.50.v20221201

org.eclipse.jetty

jetty-io

9.4.50.v20221201

org.eclipse.jetty

jetty-jndi

9.4.50.v20221201

org.eclipse.jetty

jetty-plus

9.4.50.v20221201

org.eclipse.jetty

jetty-proxy

9.4.50.v20221201

org.eclipse.jetty

jetty-security

9.4.50.v20221201

org.eclipse.jetty

jetty服務器

9.4.50.v20221201

org.eclipse.jetty

jetty servlet

9.4.50.v20221201

org.eclipse.jetty

jetty-servlets

9.4.50.v20221201

org.eclipse.jetty

jetty-util

9.4.50.v20221201

org.eclipse.jetty

jetty-util-ajax

9.4.50.v20221201

org.eclipse.jetty

jetty-webapp

9.4.50.v20221201

org.eclipse.jetty

jetty-xml

9.4.50.v20221201

org.eclipse.jetty.websocket

websocket-api

9.4.50.v20221201

org.eclipse.jetty.websocket

websocket-client

9.4.50.v20221201

org.eclipse.jetty.websocket

websocket-common

9.4.50.v20221201

org.eclipse.jetty.websocket

websocket服務器

9.4.50.v20221201

org.eclipse.jetty.websocket

websocket-servlet

9.4.50.v20221201

org.fusesource.leveldbjni

leveldbjni-all

1.8

org.glassfish.hk2

hk2-api

2.6.1

org.glassfish.hk2

hk2-locator

2.6.1

org.glassfish.hk2

hk2-utils

2.6.1

org.glassfish.hk2

osgi-resource-locator

1.0.3

org.glassfish.hk2.external

aopalliance-repackaged

2.6.1

org.glassfish.hk2.external

jakarta.inject

2.6.1

org.glassfish.jersey.containers

jersey-container-servlet

2.36

org.glassfish.jersey.containers

jersey-container-servlet-core

2.36

org.glassfish.jersey.core

jersey客戶端

2.36

org.glassfish.jersey.core

jersey-common

2.36

org.glassfish.jersey.core

jersey-server

2.36

org.glassfish.jersey.inject

jersey-hk2

2.36

org.hibernate.validator

hibernate驗證框架

6.1.7.Final

org.javassist

javassist

3.25.0-GA

org.jboss.logging

jboss-logging

3.3.2.Final

org.jdbi

jdbi

2.63.1

org.jetbrains

注釋

17.0.0

org.joda

joda-convert

1.7

org.jodd

jodd-core

3.5.2

org.json4s

json4s-ast_2.12

3.7.0-M11

org.json4s

json4s-core_2.12

3.7.0-M11

org.json4s

json4s-jackson_2.12

3.7.0-M11

org.json4s

json4s-scalap_2.12

3.7.0-M11

org.lz4

lz4-java

1.8.0

org.mariadb.jdbc

mariadb-java-client

第2.7.4

org.mlflow

mlflow-spark

2.2.0

org.objenesis

objenesis

2.5.1

org.postgresql

postgresql

42.3.8

org.roaringbitmap

RoaringBitmap

0.9.39

org.roaringbitmap

墊片

0.9.39

org.rocksdb

rocksdbjni

7.8.3

org.rosuda.REngine

REngine

魅惑

org.scala-lang

scala-compiler_2.12

2.12.15

org.scala-lang

scala-library_2.12

2.12.15

org.scala-lang

scala-reflect_2.12

2.12.15

org.scala-lang.modules

scala-collection-compat_2.12

2.4.3

org.scala-lang.modules

scala-parser-combinators_2.12

1.1.2

org.scala-lang.modules

scala-xml_2.12

1.2.0

org.scala-sbt

測試界麵

1.0

org.scalacheck

scalacheck_2.12

1.14.2

org.scalactic

scalactic_2.12

3.2.15

org.scalanlp

breeze-macros_2.12

魅惑

org.scalanlp

breeze_2.12

魅惑

org.scalatest

scalatest-compatible

3.2.15

org.scalatest

scalatest-core_2.12

3.2.15

org.scalatest

scalatest-diagrams_2.12

3.2.15

org.scalatest

scalatest-featurespec_2.12

3.2.15

org.scalatest

scalatest-flatspec_2.12

3.2.15

org.scalatest

scalatest-freespec_2.12

3.2.15

org.scalatest

scalatest-funspec_2.12

3.2.15

org.scalatest

scalatest-funsuite_2.12

3.2.15

org.scalatest

scalatest-matchers-core_2.12

3.2.15

org.scalatest

scalatest-mustmatchers_2.12

3.2.15

org.scalatest

scalatest-propspec_2.12

3.2.15

org.scalatest

scalatest-refspec_2.12

3.2.15

org.scalatest

scalatest-shouldmatchers_2.12

3.2.15

org.scalatest

scalatest-wordspec_2.12

3.2.15

org.scalatest

scalatest_2.12

3.2.15

org.slf4j

jcl-over-slf4j

2.0.6

org.slf4j

jul-to-slf4j

2.0.6

org.slf4j

slf4j-api

2.0.6

org.threeten

threeten-extra

1.7.1上

org.tukaani

xz

1.9

org.typelevel

algebra_2.12

2.0.1

org.typelevel

cats-kernel_2.12

2.1.1

org.typelevel

spire-macros_2.12

0.17.0

org.typelevel

spire-Beplay体育安卓版本platform_2.12

0.17.0

org.typelevel

spire-util_2.12

0.17.0

org.typelevel

spire_2.12

0.17.0

org.wildfly.openssl

wildfly-openssl

1.1.3.Final

org.xerial

sqlite-jdbc

3.42.0.0

org.xerial.snappy

snappy-java

1.1.8.4

org.yaml

snakeyaml

1.33

奧羅

奧羅

2.0.8

pl.edu.icm

JLargeArrays

1.5

software.amazon.cryptools

AmazonCorrettoCryptoProvider

1.6.1-linux-x86_64

software.amazon.ion

ion-java

1.0.2中

stax

stax-api

1.0.1