砖运行时11.3 LTS

以下版本注释提供信息数据砖LTS 11.3运行时,由Apache 3.3.0火花。2022年10月砖发布这些图片。

请注意

LTS意味着这个版本长期支持。看到(LTS)生命周期的长期支持

新特性和改进

砖运动连接器现在支持阅读从EFO运动数据流模式

您现在可以使用砖的砖结构运动的流源运行时11.3 LTS运行查询,从运动读取数据流在增强扇出模式。这允许专用的吞吐量/碎片,每个消费者和记录交付在推动模式。

添加新H3地理空间功能和光子对H3所有功能的支持

介绍4个新的H3函数,h3_maxchild,h3_minchild,h3_pointash3,h3_pointash3string。这些功能都可以在SQL, Scala和Python。在光子H3表达式现在支持。看到H3地理空间功能

增加初始分区扫描选择性查询

价值的初始分区扫描已经增加到10选择性查询/尾/限制在Photon-enabled集群和限制在砖SQL。有10个分区,你可以避免的开销推出多个小工作,慢慢扩大。您还可以配置通过spark.sql.limit.selectiveInitialNumPartitions

新的AQE计划版本可视化

引入AQE计划版本允许您可视化运行时从自适应查询执行计划更新(AQE)。

新的异步进展跟踪和日志清除模式

引入结构化流模式称为异步进展跟踪和异步日志清除。流的异步日志清除模式降低了延迟查询通过删除日志用于在后台跟踪进展。

统一目录现在支持结构化流显示()

您现在可以使用显示()当你使用结构化流与注册表统一目录。

管道事件现在登录JSON格式

砖现在写管道事件司机登录JSON格式。虽然每个事件将JSON-parseable,大事件可能不包含所有字段,或字段可能会被截断。每个事件都记录在一个前缀事件收到:。下面是一个示例事件。

事件得到:{" id ":“some-event-id”,“起源”:{“pipeline_id”:“some-pipeline-id”、“cluster_id”:“some-cluster id”},“消息”:“简单的(截断)消息”,“水平”:“警告”}

任意状态处理结构化流与Python

介绍了applyInPandasWithState函数可以用来执行任意PySpark状态处理。这是等效的flatMapGroupsWithStateJava API函数。

日期推断在CSV文件中

引入改进的推理在CSV文件日期类型的列。当日期格式是一致的在记录一个列,这些列可以推断DateType。你也可以有一个日期格式的组合在不同的列。砖可以自动推断出每一列的日期格式。CSV文件中日期列砖之前运行时11.3 LTS离开StringType

克隆支持Apache拼花和Apache冰山表(公共预览版)

克隆可以用于创建和增量更新三角洲表镜Apache拼花和Apache冰山表。你可以更新源拼花表和逐步应用更改用克隆命令克隆三角洲表。看到增量克隆拼花和冰山表三角洲湖

使用SQL指定模式,catalog-level统一目录管理表的存储位置

您现在可以使用管理位置SQL命令指定一个云存储位置表目录和模式层面的管理。看到创建目录创建模式

行为变化

更新数据砖雪花连接器

砖雪花的连接器已经更新到最新版本的代码从开源库,雪花数据源为Apache火花。现在完全兼容砖运行时11.3 LTS,包括谓词下推和内部查询计划叠加,同时保持所有的开源版本的特点。

Hadoop缓存S3A现在是禁用的

Hadoop缓存(文件系统3.3.4 Apache Hadoop主API)S3A现在是禁用的。这是与其他云存储连接器对齐。对于依赖于文件系统缓存的工作负载,确保新创建的文件系统提供正确的Hadoop配置,包括证书提供商。

三角洲湖现在的数据收集模式匹配列顺序表模式定义

这种变化在三角洲湖协议地址错误,数据没有收集对由于DataFrame不匹配的列和表列排序。在某些情况下,您可能会遇到写性能退化由于数据收集在之前开始回升的字段。看到数据不与z顺序索引三角洲湖

applyInPandasWithState抛出一个错误如果查询有洗牌后,操作员

操作员applyInPandasWithState如果查询抛出一个错误洗牌后的操作符。这发生在用户补充道洗牌手术后,优化器或水槽补充道洗牌隐式。

库升级

  • 升级的Python库:

    • distlib 0.3.5 0.3.6

  • 升级R库:

    • 扫帚1.0.0 1.0.1

    • callr 3.7.1 3.7.2章

    • dplyr 1.0.9 1.0.10

    • 从这次1.2.1 dtplyr 1.2.2

    • forcats 0.5.1 0.5.2

    • 未来1.27.0 1.28.0

    • future.applyfrom 1.9.0 to 1.9.1

    • 哥特1.7.0 1.8.0

    • 全局0.16.0 0.16.1

    • gtable 0.3.0 0.3.1

    • 还从2.5.0 2.5.1

    • hms 1.1.1 1.1.2

    • 1.4.4 httr从3

    • knitr从1.39到1.40

    • modelr 0.1.8 0.1.9

    • 从1.8.0 1.8.1支柱

    • 从0.10.1 progressr 0.11.0。它

    • readxl 1.4.0 1.4.1

    • reprex 2.0.2 2.0.1

    • rlang 1.0.4 1.0.5

    • rmarkdown从2.14到2.16

    • RSQLite 2.2.15 2.2.16

    • rstudioapi从0.13到0.14

    • rversions 2.1.1和2.1.2

    • 房车1.0.3 1.0.2中

    • 尺度从1.2.0 1.2.1

    • sparklyr 1.7.7 1.7.8

    • stringr 1.4.0 1.4.1

    • 生存从-13年3.2到3.4 0

    • tinytex从0.40到0.41

    • viridisLite 0.4.0 0.4.1

  • 升级Java库:

    • com.fasterxml.jackson.core。jackson-annotationsfrom 2.13.3 to 2.13.4

    • com.fasterxml.jackson.core。jackson-corefrom 2.13.3 to 2.13.4

    • com.fasterxml.jackson.core。jackson-databindfrom 2.13.3 to 2.13.4

    • com.fasterxml.jackson.dataformat。jackson-dataformat-cborfrom 2.13.3 to 2.13.4

    • com.fasterxml.jackson.datatype。jackson-datatype-jodafrom 2.13.3 to 2.13.4

    • com.fasterxml.jackson.datatype。jackson-datatype-jsr310from 2.13.3 to 2.13.4

    • com.fasterxml.jackson.module。jackson-module-paranamerfrom 2.13.3 to 2.13.4

    • com.fasterxml.jackson.module.jackson-module-scala_2.12 2.13.3 2.13.4

    • org.apache.hadoop。hadoop-client-apifrom 3.3.2-databricks to 3.3.4-databricks

    • org.apache.hadoop。3.3.4 hadoop-client-runtime从3.3.2

    • org.apache.orc。orc-corefrom 1.7.5 to 1.7.6

    • org.apache.orc。orc-mapreducefrom 1.7.5 to 1.7.6

    • org.apache.orc。orc-shimsfrom 1.7.5 to 1.7.6

    • org.apache.parquet。parquet-columnfrom 1.12.0-databricks-0004 to 1.12.0-databricks-0007

    • org.apache.parquet。parquet-commonfrom 1.12.0-databricks-0004 to 1.12.0-databricks-0007

    • org.apache.parquet。parquet-encodingfrom 1.12.0-databricks-0004 to 1.12.0-databricks-0007

    • org.apache.parquet。parquet-format-structures 1.12.0-databricks-0004 1.12.0-databricks-0007

    • org.apache.parquet。parquet-hadoopfrom 1.12.0-databricks-0004 to 1.12.0-databricks-0007

    • org.apache.parquet。parquet-jacksonfrom 1.12.0-databricks-0004 to 1.12.0-databricks-0007

    • org.glassfish.jersey.containers。jersey-container-servletfrom 2.34 to 2.36

    • org.glassfish.jersey.containers。jersey-container-servlet-corefrom 2.34 to 2.36

    • org.glassfish.jersey.core。jersey客户端from 2.34 to 2.36

    • org.glassfish.jersey.core。jersey-commonfrom 2.34 to 2.36

    • org.glassfish.jersey.core。jersey-serverfrom 2.34 to 2.36

    • org.glassfish.jersey.inject。jersey-hk2从2.34到2.36

Apache火花

砖运行时11.3 LTS包括Apache 3.3.0火花。这个版本包括所有火花修复和改进中砖11.2运行时以及以下额外的bug修复和改进了火花:

  • (火花- 39957)[WARMFIX] [sc - 111425](核心)延迟onDisconnected使司机收到ExecutorExitCode

  • (火花- 39955)[WARMFIX] [sc - 111424](核心)改善LaunchTask过程避免阶段失败造成的不能发送LaunchTask消息

  • (火花- 40474)(sc - 106248][择优挑选]正确的CSV模式推理行为datetime列和介绍汽车检测日期字段

  • (火花- 40535)(sc - 111243] [SQL]修复bug的缓冲将不会创建AggregatingAccumulator如果输入行是空的

  • (火花- 40434)(sc - 111125) [sc - 111144] [sc - 111138][火花- 40435][11.3][SS] (PYTHON)实现applyInPandasWithState PySpark

  • (火花- 40460)(sc - 110832) [SS]解决流指标在选择_metadata

  • (火花- 40324)(sc - 109943] [SQL]提供一个查询的上下文抛出ParseException

  • (火花- 40466)(sc - 110899) [SS]改善错误消息时禁用DSv2 DSv1不勾选

  • (火花- 40456)(sc - 110848) [SQL] PartitionIterator。hasNext应该便宜反复调用

  • (火花- 40169)(sc - 110772] [SQL]不叠加铺过滤器没有参考数据模式

  • (火花- 40467)(sc - 110759) [SS]分裂FlatMapGroupsWithState多个测试套件

  • (火花- 40468)(sc - 110813] [SQL]修复列在CSV修剪腐败的记录被选中

  • (火花- 40291)(sc - 110085] [SQL]改善group by子句的消息对列没有错误

  • (火花- 40398)(sc - 110762)(核心)[SQL]使用循环而不是数组。流api

  • (火花- 40433)PYTHON (sc - 110684) [SS][]添加toJVMRow PythonSQLUtils将腌PySpark行到JVM行

  • (火花- 40414)PYTHON (sc - 110568) [SQL] [] PythonArrowInput和PythonArrowOutput更通用的类型

  • (火花- 40352)(sc - 109945) [SQL]函数添加别名:len, datepart,返回,date_diff curdate

  • (火花- 40470)(sc - 110761] [SQL]处理GetArrayStructFields和GetMapValue“arrays_zip”功能

  • (火花- 40387)(sc - 110685] [SQL]提高火花的实现小数

  • (火花- 40429)(sc - 110675] [SQL]时才设置KeyGroupedPartitioning引用列输出

  • (火花- 40432)PYTHON (sc - 110716) [SS][]介绍GroupStateImpl PySpark GroupStateTimeout

  • (火花- 39915)(sc - 110496] [SQL]确保分区是AQE指定的输出

  • (火花- 29260)[SQL]支持改变数据库位置如果HMS支持

  • (火花- 40185)(sc - 110056] [SQL]删除列候选列表为空时的建议

  • (火花- 40362)(sc - 110401] [SQL]修复BinaryComparison规范化

  • (火花- 40411)(sc - 110381) [SS]重构FlatMapGroupsWithStateExec父特征

  • (火花- 40293)(sc - 110084] [SQL]使V2表错误消息更有意义

  • (火花- 38734)(sc - 110383] [SQL]删除错误类INDEX_OUT_OF_BOUNDS

  • (火花- 40292)(sc - 110300] [SQL]修复列名在“arrays_zip”功能从嵌套的结构体数组是引用

  • (火花- 40276)(sc - 109674)(核心)减少结果RDD.takeOrdered的大小

  • (火花- 40197)(sc - 109176] [SQL]为MULTI_VALUE_SUBQUERY_ERROR查询计划替换为上下文

  • (火花- 40300)(sc - 109942] [SQL]迁移到DATATYPE_MISMATCH错误类

  • (火花- 40149)(sc - 110055] [SQL]传播通过项目元数据列

  • (火花- 40280)(sc - 110146] [SQL]为注释添加支持拼花压低int和长

  • (火花- 40220)(sc - 110143) [sc - 109175] [SQL]不输出错误消息参数的空图

  • (火花- 40295)(sc - 110070] [SQL]允许v2函数在写文字args分布/订购

  • (火花- 40156)(sc - 109264] [SQL]url_decode ()应该返回一个错误类

  • (火花- 39195)[SQL]火花OutputCommitCoordinator时应中止阶段提交文件不一致的任务状态

  • (火花- 40260)(sc - 109424] [SQL]使用错误类组由一个编译错误的位置

  • (火花- 40205)(sc - 110144) [sc - 109082] [SQL] ELEMENT_AT_BY_INDEX_ZERO提供一个查询的上下文

  • (火花- 40112)(sc - 109676] [SQL]改善TO_BINARY()函数

  • (火花- 40209)(sc - 109081] [SQL]不改变小数的区间值changePrecision ()在错误

  • (火花- 40319)(sc - 109873] [SQL] PARSE_DATETIME_BY_NEW_PARSER删除重复的查询执行的错误方法

  • (火花- 40222)(sc - 109209] [SQL]数字try_add / try_divide / try_subtract / try_multiply应该从孩子们抛出错误

  • (火花- 40183)(sc - 108907] [SQL]使用错误类NUMERIC_VALUE_OUT_OF_RANGE溢出的十进制转换

  • (火花- 40180)(sc - 109069] [SQL]格式错误消息spark-sql

  • (火花- 40153)(sc - 109165] [SQL]统一解决函数和表值函数

  • (火花- 40308)(sc - 109880] [SQL]允许non-foldable分隔符的参数str_to_map函数

  • (火花- 40219)(sc - 110052) [sc - 109663] [SQL]视图逻辑解决方案应持有模式,以避免重复查找

  • (火花- 40098)(sc - 109939) [sc - 108693] [SQL]格式在节俭服务器错误消息

  • (火花- 39917)(sc - 109038] [SQL]使用不同的数字/区间算术溢出错误类

  • (火花- 40033)(sc - 109875] [SQL]通过element_at修剪支持嵌套模式

  • (火花- 40194)(sc - 109660] [SQL]分割函数空正则表达式应该截断后空字符串。

  • (火花- 40228)(sc - 109835] [SQL]不简化multiLike如果孩子不是一个廉价的表达式

  • (火花- 40039)(sc - 109896) [sc - 109260] [SS]引入流检查点文件管理器基于Hadoop Abortable接口

  • (火花- 40285)(sc - 109679) [SQL]简化roundTo[数字]的火花小数

  • (火花- 39896)(sc - 109658] [SQL] UnwrapCastInBinaryComparison应该工作的文字/插图沮丧失败了

  • (火花- 40040)(sc - 109662] [SQL]推动本地限制双方如果加入条件是空的

  • (火花- 40055)(sc - 109075] [SQL] listCatalogs也应该回报spark_catalog即使defaultSessionCatalog spark_catalog实现

  • (火花- 39915)(sc - 109391] [SQL] Dataset.repartition N (N)可能不会创建分区Non-AQE部分

  • (火花- 40207)(sc - 109401] [SQL]指定的列名称由数据源不支持的数据类型

  • (火花- 40245)(sc - 109295] [SQL]修复FileScan平等检查当分区或数据过滤列不读

  • (火花- 40113)(sc - 109405] [SQL]反应堆ParquetScanBuilder DataSourceV2接口实现

  • (火花- 40211)(sc - 109226)(核心)[SQL]允许定制初始分区数量()的行为

  • (火花- 40252)(sc - 109379] [SQL]替换Stream.collect (Collectors.joining)StringJoinerApi

  • (火花- 40247)(sc - 109272] [SQL]修复BitSet平等检查

  • (火花- 40067)[SQL]用表#名称()而不是扫描#名称()来填充表名在SparkUI BatchScan节点

  • (火花- 39966)[SQL]在SupportsDelete使用V2过滤器

  • (火花- 39607)(sc - 109268] [SQL] [DSV2]分布和订购支持V2函数

  • (火花- 40224)(sc - 109271] [SQL]急切地当后备事ObjectHashAggregateExec释放内存

  • (火花- 40013)[SQL] DS V2表达式应该默认toString

  • (火花- 40214)(sc - 109079] [PYTHON] [SQL]添加“得到”的功能

  • (火花- 40192)(sc - 109089] [SQL] (ML)删除冗余groupby

  • (火花- 40146)(sc - 108694] [SQL]简单地得到地图的codegen价值

  • (火花- 40109)[SQL]新的SQL函数:get ()

  • (火花- 39929)[SQL] DS V2支持压低字符串函数(非ANSI)

  • (火花- 39819)[SQL] DS V2总压低可以处理前N或分页(排序与表达式)

  • (火花- 40213)(sc - 109077] [SQL]支持ASCII值转换latin - 1个字符

  • (火花- 39887)[SQL] RemoveRedundantAliases应该保持独特的别名,使投影的输出节点

  • (火花- 39764)[SQL]使PhysicalOperation ScanOperation一样

  • (火花- 39964)[SQL] DS V2叠加应该统一转化路径

  • (火花- 39528)[SQL]在SupportsRuntimeFiltering使用V2过滤器

  • (火花- 40066)[SQL] ANSI模式:无效访问地图上总是返回null列

  • (火花- 39912)[火花- 39828][SQL]完善CatalogImpl

  • (火花- 39833)(sc - 108736] [SQL]禁用铺列指数DSv1修复一个正确性问题的重叠分区和数据列

  • (火花- 39880)[SQL] V2 SHOW函数命令打印合格的函数名应该像v1

  • (火花- 39767)[SQL]删除UnresolvedDBObjectName并添加UnresolvedIdentifier

  • (火花- 40163)(sc - 108740) [SQL]的壮举:SparkSession.config(地图)

  • (火花- 40136)[SQL]解决SQL查询上下文的片段

  • (火花- 40107)(sc - 108689] [SQL]退出从FileFormatWriter empty2null转换

  • (火花- 40121)(PYTHON] [SQL]初始化投影用于PYTHON UDF

  • (火花- 40128)[SQL]使VectorizedColumnReader识别DELTA_LENGTH_BYTE_ARRAY编码作为一个独立的专栏

  • (火花- 40132)(毫升)恢复rawPredictionCol MultilayerPerceptronClassifier.setParams

  • (火花- 40050)(sc - 108696) [SQL]增强EliminateSorts支持删除通过LocalLimit

  • (火花- 39629)[SQL]支持v2显示功能

  • (火花- 39925)(sc - 108734] [SQL]添加array_sort(列,比较器)过载DataFrame操作

  • (火花- 40117)(PYTHON] [SQL] DataFrameWriterV2.overwrite条件转换为java

  • (火花- 40105)[SQL]改善ReplaceCTERefWithRepartition的重新分配

  • (火花- 39503)[SQL]为v1数据库表添加会话目录名称和功能

  • (火花- 39889)[SQL]使用不同的错误类数字/间隔除以0

  • (火花- 39741)[SQL]支持url编码/解码内置函数和整理url-related功能

  • (火花- 40102)[SQL]用SparkException代替IllegalStateException SparkPlan

  • (火花- 40014)[SQL]支持ANSI间隔的小数

  • (火花- 39776)[SQL](遵循)更新UT PlanStabilitySuite ANSI模式

  • (火花- 39963)[SQL]简化SimplifyCasts.isWiderCast

系统环境

  • 操作系统:Ubuntu 20.04.5 LTS

  • Java:祖鲁8.56.0.21-CA-linux64

  • Scala:2.12.14

  • Python:3.9.5

  • R:4.1.3

  • 三角洲湖:魅惑

安装Python库

图书馆

版本

图书馆

版本

图书馆

版本

argon2-cffi

20.1.0

async-generator

1.10

attrs

21.2.0

backcall

0.2.0

backports.entry-points-selectable

1.1.1

黑色的

22.3.0

漂白剂

4.0.0

boto3

1.21.18

botocore

1.24.18

certifi

2021.10.8

cffi

1.14.6

chardet

4.0.0

charset-normalizer

2.0.4

点击

8.0.3

密码学

3.4.8

周期计

0.10.0

Cython

0.29.24

dbus-python

1.2.16

debugpy

1.4.1

装饰

5.1.0

defusedxml

是0.7.1

distlib

0.3.6

entrypoints

0.3

facets-overview

1.0.0

filelock

3.8.0

idna

3.2

ipykernel

6.12.1

ipython

7.32.0

ipython-genutils

0.2.0

ipywidgets

7.7.0

绝地武士

0.18.0

Jinja2

14

jmespath

0.10.0

joblib

1.0.1

jsonschema

3.2.0

jupyter-client

6.1.12

jupyter-core

4.8.1

jupyterlab-pygments

0.1.2

jupyterlab-widgets

1.0.0

kiwisolver

1.3.1

MarkupSafe

2.0.1

matplotlib

3.4.3

matplotlib-inline

0.1.2

使走调

0.8.4

mypy-extensions

0.4.3

nbclient

0.5.3

nbconvert

6.1.0

nbformat

5.1.3

nest-asyncio

1.5.1

笔记本

6.4.5

numpy

1.20.3

包装

21.0

熊猫

1.3.4

pandocfilters

3

parso

0.8.2

pathspec

0.9.0

容易受骗的人

0.5.2

pexpect

4.8.0

pickleshare

0.7.5

枕头

8.4.0

皮普

21.2.4

bob体育客户端下载platformdirs

2.5.2

情节

5.9.0

prometheus-client

0.11.0

prompt-toolkit

3.0.20

protobuf

4.21.5

psutil

5.8.0

psycopg2

2.9.3

ptyprocess

0.7.0

pyarrow

7.0.0

pycparser

2.20

Pygments

2.10.0

PyGObject

3.36.0

pyodbc

4.0.31

pyparsing

3.0.4

pyrsistent

0.18.0

python-dateutil

2.8.2

pytz

2021.3

pyzmq

22.2.1

请求

2.26.0

requests-unixsocket

0.2.0

s3transfer

0.5.2

scikit-learn

0.24.2

scipy

1.7.1上

seaborn

0.11.2

Send2Trash

1.8.0

setuptools

58.0.4

六个

1.16.0

ssh-import-id

5.10

statsmodels

0.12.2

韧性

8.0.1

terminado

0.9.4

testpath

0.5.0

threadpoolctl

2.2.0

tokenize-rt

4.2.1

tomli

2.0.1

龙卷风

6.1

traitlets

5.1.0

typing-extensions

3.10.0.2

unattended-upgrades

0.1

urllib3

1.26.7

virtualenv

20.8.0

wcwidth

0.2.5

webencodings

0.5.1

0.37.0

widgetsnbextension

3.6.0

安装R库

R库的安装微软在2022-09-08凹口快照

图书馆

版本

图书馆

版本

图书馆

版本

askpass

1.1

为了

0.2.1

补丁

1.4.1

基地

4.1.3

base64enc

0.1 - 3

4.0.4

bit64

1.2.3

引导

-28 - 1.3

酿造

1.0 7

生动

1.1.3

扫帚

1.0.1

bslib

0.4.0

cachem

1.0.6

callr

3.7.2章

脱字符号

-93 - 6.0

cellranger

1.1.0

时间

-57 - 2.3

-20 - 7.3

cli

3.3.0

clipr

0.8.0

集群

2.1.3

codetools

-18 - 0.2

色彩

2.0 - 3

commonmark

1.8.0

编译器

4.1.3

配置

0.3.1

cpp11

0.4.2

蜡笔

1.5.1

凭证

1.3.2

旋度

4.3.2

data.table

1.14.2

数据集

4.1.3

DBI

1.1.3

dbplyr

2.2.1

desc

1.4.1

devtools

2.4.4

diffobj

0.3.5

消化

0.6.29

downlit

0.4.2

dplyr

1.0.10

dtplyr

1.2.2

e1071

-11 - 1.7

省略

0.3.2

评估

0.16

fansi

1.0.3

farver

2.1.1

fastmap

1.1.0

fontawesome

0.3.0

forcats

0.5.2

foreach

1.5.2

外国

-82 - 0.8

打造

0.2.0

fs

1.5.2

未来

1.28.0

future.apply

1.9.1

含漱剂

1.2.0

泛型

0.1.3

哥特

1.8.0

ggplot2

3.3.6

“大酒店”

1.3.0

gitcreds

0.1.1

glmnet

4.1 - 4

全局变量

0.16.1

胶水

1.6.2

googledrive

2.0.0

googlesheets4

1.0.1

高尔

1.0.0

图形

4.1.3

grDevices

4.1.3

网格

4.1.3

gridExtra

2.3

gsubfn

0.7

gtable

0.3.1

需要戴安全帽的

1.2.0

2.5.1

highr

0.9

hms

1.1.2

htmltools

0.5.3

htmlwidgets

1.5.4

httpuv

1.6.5

httr

1.4.4

id

1.0.1

ini

0.3.1

不小

-13 - 0.9

isoband

0.2.5

迭代器

1.0.14

jquerylib

0.1.4

jsonlite

1.8.0

KernSmooth

-20 - 2.23

knitr

1.40

标签

0.4.2

晚些时候

1.3.0

晶格

-45 - 0.20

熔岩

1.6.10

生命周期

1.0.1

listenv

0.8.0

lubridate

1.8.0

magrittr

2.0.3

减价

1.1

质量

-56 - 7.3

矩阵

1.4 - 1

memoise

2.0.1

方法

4.1.3

mgcv

-40 - 1.8

mime

0.12

miniUI

0.1.1.1

ModelMetrics

1.2.2.2

modelr

0.1.9

孟塞尔

0.5.0

nlme

-157 - 3.1

nnet

-17 - 7.3

numDeriv

2016.8 - -1.1

openssl

2.0.2

平行

4.1.3

平行

1.32.1

支柱

1.8.1

pkgbuild

1.3.1

pkgconfig

2.0.3

pkgdown

2.0.6

pkgload

1.3.0

plogr

0.2.0

plyr

1.8.7

赞美

1.0.0

prettyunits

1.1.1

pROC

1.18.0

processx

3.7.0

prodlim

2019.11.13

profvis

0.3.7

进步

1.2.2

progressr

0.11.0

承诺

1.2.0.1

原型

1.0.0

代理

-27 - 0.4

ps

1.7.1上

purrr

0.3.4

r2d3

0.2.6虽然只是

R6

2.5.1

ragg

1.2.2

randomForest

4.7 - -1.1

rappdirs

0.3.3

rcmdcheck

1.4.0

RColorBrewer

1.1 - 3

Rcpp

1.0.9

RcppEigen

0.3.3.9.2

readr

2.1.2

readxl

1.4.1

食谱

1.0.1

复赛

1.0.1

rematch2

2.1.2

遥控器

2.4.2

reprex

2.0.2

reshape2

1.4.4

rlang

1.0.5

rmarkdown

2.16

RODBC

-19 - 1.3

roxygen2

7.2.1

rpart

4.1.16

rprojroot

2.0.3

Rserve

-11 - 1.8

RSQLite

2.2.16

rstudioapi

0.14

rversions

2.1.2

房车

1.0.3

萨斯

0.4.2

尺度

1.2.1 "

selectr

0.4 - 2

sessioninfo

1.2.2

形状

1.4.6

闪亮的

1.7.2

sourcetools

0.1.7

sparklyr

1.7.8

SparkR

3.3.0

空间

-11 - 7.3

样条函数

4.1.3

sqldf

-11 - 0.4

SQUAREM

2021.1

统计数据

4.1.3

stats4

4.1.3

stringi

1.7.8

stringr

1.4.1

生存

3.4 0

sys

3.4

systemfonts

1.0.4

tcltk

4.1.3

testthat

3.1.4

textshaping

0.3.6

宠物猫

3.1.8中

tidyr

1.2.0

tidyselect

1.1.2

tidyverse

1.3.2

timeDate

4021.104

tinytex

0.41

工具

4.1.3

tzdb

0.3.0

urlchecker

1.0.1

usethis

2.1.6

use utf8

1.2.2

跑龙套

4.1.3

uuid

1.1 0

vctrs

0.4.1

viridisLite

0.4.1

发呜呜声

1.5.7

沃尔多

0.4.0

晶须

0.4

withr

2.5.0

xfun

0.32

xml2

1.3.3

xopen

1.0.0

xtable

1.8 - 4

yaml

2.3.5

邮政编码

2.2.0

安装了Java和Scala库(Scala 2.12集群版)

组ID

工件ID

版本

antlr

antlr

2.7.7

com.amazonaws

amazon-kinesis-client

1.12.0

com.amazonaws

aws-java-sdk-autoscaling

1.12.189

com.amazonaws

aws-java-sdk-cloudformation

1.12.189

com.amazonaws

aws-java-sdk-cloudfront

1.12.189

com.amazonaws

aws-java-sdk-cloudhsm

1.12.189

com.amazonaws

aws-java-sdk-cloudsearch

1.12.189

com.amazonaws

aws-java-sdk-cloudtrail

1.12.189

com.amazonaws

aws-java-sdk-cloudwatch

1.12.189

com.amazonaws

aws-java-sdk-cloudwatchmetrics

1.12.189

com.amazonaws

aws-java-sdk-codedeploy

1.12.189

com.amazonaws

aws-java-sdk-cognitoidentity

1.12.189

com.amazonaws

aws-java-sdk-cognitosync

1.12.189

com.amazonaws

aws-java-sdk-config

1.12.189

com.amazonaws

aws-java-sdk-core

1.12.189

com.amazonaws

aws-java-sdk-datapipeline

1.12.189

com.amazonaws

aws-java-sdk-directconnect

1.12.189

com.amazonaws

aws-java-sdk-directory

1.12.189

com.amazonaws

aws-java-sdk-dynamodb

1.12.189

com.amazonaws

aws-java-sdk-ec2

1.12.189

com.amazonaws

aws-java-sdk-ecs

1.12.189

com.amazonaws

aws-java-sdk-efs

1.12.189

com.amazonaws

aws-java-sdk-elasticache

1.12.189

com.amazonaws

aws-java-sdk-elasticbeanstalk

1.12.189

com.amazonaws

aws-java-sdk-elasticloadbalancing

1.12.189

com.amazonaws

aws-java-sdk-elastictranscoder

1.12.189

com.amazonaws

aws-java-sdk-emr

1.12.189

com.amazonaws

aws-java-sdk-glacier

1.12.189

com.amazonaws

aws-java-sdk-glue

1.12.189

com.amazonaws

aws-java-sdk-iam

1.12.189

com.amazonaws

aws-java-sdk-importexport

1.12.189

com.amazonaws

aws-java-sdk-kinesis

1.12.189

com.amazonaws

aws-java-sdk-kms

1.12.189

com.amazonaws

aws-java-sdk-lambda

1.12.189

com.amazonaws

aws-java-sdk-logs

1.12.189

com.amazonaws

aws-java-sdk-machinelearning

1.12.189

com.amazonaws

aws-java-sdk-opsworks

1.12.189

com.amazonaws

aws-java-sdk-rds

1.12.189

com.amazonaws

aws-java-sdk-redshift

1.12.189

com.amazonaws

aws-java-sdk-route53

1.12.189

com.amazonaws

aws-java-sdk-s3

1.12.189

com.amazonaws

aws-java-sdk-ses

1.12.189

com.amazonaws

aws-java-sdk-simpledb

1.12.189

com.amazonaws

aws-java-sdk-simpleworkflow

1.12.189

com.amazonaws

aws-java-sdk-sns

1.12.189

com.amazonaws

aws-java-sdk-sqs

1.12.189

com.amazonaws

aws-java-sdk-ssm

1.12.189

com.amazonaws

aws-java-sdk-storagegateway

1.12.189

com.amazonaws

aws-java-sdk-sts

1.12.189

com.amazonaws

aws-java-sdk-support

1.12.189

com.amazonaws

aws-java-sdk-swf-libraries

1.11.22

com.amazonaws

aws-java-sdk-workspaces

1.12.189

com.amazonaws

jmespath-java

1.12.189

com.chuusai

shapeless_2.12

2.3.3

com.clearspring.analytics

2.9.6

com.databricks

Rserve

1.8 - 3

com.databricks

jets3t

0.7.1-0

com.databricks.scalapb

compilerplugin_2.12

0.4.15-10

com.databricks.scalapb

scalapb-runtime_2.12

0.4.15-10

com.esotericsoftware

kryo-shaded

4.0.2

com.esotericsoftware

minlog

1.3.0

com.fasterxml

同学

1.3.4

com.fasterxml.jackson.core

jackson-annotations

2.13.4

com.fasterxml.jackson.core

jackson-core

2.13.4

com.fasterxml.jackson.core

jackson-databind

2.13.4

com.fasterxml.jackson.dataformat

jackson-dataformat-cbor

2.13.4

com.fasterxml.jackson.datatype

jackson-datatype-joda

2.13.4

com.fasterxml.jackson.datatype

jackson-datatype-jsr310

2.13.4

com.fasterxml.jackson.module

jackson-module-paranamer

2.13.4

com.fasterxml.jackson.module

jackson-module-scala_2.12

2.13.4

com.github.ben-manes.caffeine

咖啡因

2.3.4

com.github.fommil

jniloader

1.1

com.github.fommil.netlib

核心

1.1.2

com.github.fommil.netlib

native_ref-java

1.1

com.github.fommil.netlib

native_ref-java-natives

1.1

com.github.fommil.netlib

native_system-java

1.1

com.github.fommil.netlib

native_system-java-natives

1.1

com.github.fommil.netlib

netlib-native_ref-linux-x86_64-natives

1.1

com.github.fommil.netlib

netlib-native_system-linux-x86_64-natives

1.1

com.github.luben

zstd-jni

1.5.2-1

com.github.wendykierp

JTransforms

3.1

com.google.code.findbugs

jsr305

3.0.0

com.google.code.gson

gson

2.8.6

com.google.crypto.tink

叮叮铃

1.6.1

com.google.flatbuffers

flatbuffers-java

1.12.0

com.google.guava

番石榴

15.0

com.google.protobuf

protobuf-java

2.6.1

com.h2database

h2

2.0.204

com.helger

分析器

1.1.1

com.jcraft

jsch

0.1.50

com.jolbox

bonecp

0.8.0.RELEASE

com.lihaoyi

sourcecode_2.12

0.1.9

com.microsoft.azure

azure-data-lake-store-sdk

2.3.9

com.ning

compress-lzf

1.1

com.sun.mail

javax.mail

1.5.2

com.tdunning

json

1.8

com.thoughtworks.paranamer

paranamer

2.8

com.trueaccord.lenses

lenses_2.12

0.4.12

com.twitter

chill-java

0.10.0

com.twitter

chill_2.12

0.10.0

com.twitter

util-app_2.12

7.1.0

com.twitter

util-core_2.12

7.1.0

com.twitter

util-function_2.12

7.1.0

com.twitter

util-jvm_2.12

7.1.0

com.twitter

util-lint_2.12

7.1.0

com.twitter

util-registry_2.12

7.1.0

com.twitter

util-stats_2.12

7.1.0

com.typesafe

配置

1.2.1 "

com.typesafe.scala-logging

scala-logging_2.12

3.7.2章

com.uber

h3

3.7.0

com.univocity

univocity-parsers

2.9.1

com.zaxxer

HikariCP

4.0.3

commons-cli

commons-cli

1.5.0

commons-codec

commons-codec

1.15

commons-collections

commons-collections

3.2.2

commons-dbcp

commons-dbcp

1.4

commons-fileupload

commons-fileupload

1.3.3

commons-httpclient

commons-httpclient

3.1

commons-io

commons-io

2.11.0

commons lang

commons lang

2.6

通用日志

通用日志

1.1.3

commons-pool

commons-pool

1.5.4

dev.ludovic.netlib

arpack

2.2.1

dev.ludovic.netlib

布拉斯特区

2.2.1

dev.ludovic.netlib

lapack

2.2.1

info.ganglia.gmetric4j

gmetric4j

1.0.10

io.airlift

aircompressor

0.21

io.delta

delta-sharing-spark_2.12

0.5.1

io.dropwizard.metrics

metrics-core

以下4.4.1

io.dropwizard.metrics

metrics-graphite

以下4.4.1

io.dropwizard.metrics

metrics-healthchecks

以下4.4.1

io.dropwizard.metrics

metrics-jetty9

以下4.4.1

io.dropwizard.metrics

metrics-jmx

以下4.4.1

io.dropwizard.metrics

metrics-json

以下4.4.1

io.dropwizard.metrics

metrics-jvm

以下4.4.1

io.dropwizard.metrics

metrics-servlets

以下4.4.1

io.netty

netty-all

4.1.74.Final

io.netty

netty-buffer

4.1.74.Final

io.netty

netty-codec

4.1.74.Final

io.netty

netty-common

4.1.74.Final

io.netty

netty-handler

4.1.74.Final

io.netty

netty-resolver

4.1.74.Final

io.netty

netty-tcnative-classes

2.0.48.Final

io.netty

netty-transport

4.1.74.Final

io.netty

netty-transport-classes-epoll

4.1.74.Final

io.netty

netty-transport-classes-kqueue

4.1.74.Final

io.netty

netty-transport-native-epoll-linux-aarch_64

4.1.74.Final

io.netty

netty-transport-native-epoll-linux-x86_64

4.1.74.Final

io.netty

netty-transport-native-kqueue-osx-aarch_64

4.1.74.Final

io.netty

netty-transport-native-kqueue-osx-x86_64

4.1.74.Final

io.netty

netty-transport-native-unix-common

4.1.74.Final

io.prometheus

simpleclient

0.7.0

io.prometheus

simpleclient_common

0.7.0

io.prometheus

simpleclient_dropwizard

0.7.0

io.prometheus

simpleclient_pushgateway

0.7.0

io.prometheus

simpleclient_servlet

0.7.0

io.prometheus.jmx

收集器

0.12.0

jakarta.annotation

jakarta.annotation-api

1.3.5

jakarta.servlet

jakarta.servlet-api

4.0.3

jakarta.validation

jakarta.validation-api

2.0.2

jakarta.ws.rs

jakarta.ws.rs-api

2.1.6

javax.activation

激活

1.1.1

javax.annotation

javax.annotation-api

1.3.2

javax.el

javax.el-api

2.2.4

javax.jdo

jdo api

3.0.1

javax.transaction

jta

1.1

javax.transaction

事务api

1.1

javax.xml.bind

jaxb-api

. 2.2.11

javolution

javolution

5.5.1

jline

jline

2.14.6

joda-time

joda-time

2.10.13

net.java.dev.jna

jna

5.8.0

net.razorvine

泡菜

1.2

net.sf.jpam

jpam

1.1

net.sf.opencsv

opencsv

2.3

net.sf.supercsv

super-csv

2.2.0

net.snowflake

snowflake-ingest-sdk

0.9.6

net.snowflake

snowflake-jdbc

3.13.14

net.sourceforge.f2j

arpack_combined_all

0.1

org.acplt.remotetea

remotetea-oncrpc

1.1.2

org.antlr

ST4

4.0.4

org.antlr

antlr-runtime

3.5.2

org.antlr

antlr4-runtime

4.8

org.antlr

stringtemplate

3.2.1之上

org.apache.ant

蚂蚁

1.9.2

org.apache.ant

ant-jsch

1.9.2

org.apache.ant

ant-launcher

1.9.2

org.apache.arrow

arrow-format

7.0.0

org.apache.arrow

arrow-memory-core

7.0.0

org.apache.arrow

arrow-memory-netty

7.0.0

org.apache.arrow

arrow-vector

7.0.0

org.apache.avro

avro

1.11.0

org.apache.avro

avro-ipc

1.11.0

org.apache.avro

avro-mapred

1.11.0

org.apache.commons

commons-collections4

4.4

org.apache.commons

commons-compress

1.21

org.apache.commons

commons-crypto

1.1.0

org.apache.commons

commons-lang3

3.12.0

org.apache.commons

commons-math3

3.6.1

org.apache.commons

commons-text

1.9

org.apache.curator

curator-client

2.13.0

org.apache.curator

curator-framework

2.13.0

org.apache.curator

curator-recipes

2.13.0

org.apache.derby

德比

10.14.2.0

org.apache.hadoop

hadoop-client-api

3.3.4-databricks

org.apache.hadoop

hadoop-client-runtime

3.3.4

org.apache.hive

hive-beeline

2.3.9

org.apache.hive

hive-cli

2.3.9

org.apache.hive

hive-jdbc

2.3.9

org.apache.hive

hive-llap-client

2.3.9

org.apache.hive

hive-llap-common

2.3.9

org.apache.hive

hive-serde

2.3.9

org.apache.hive

hive-shims

2.3.9

org.apache.hive

hive-storage-api

2.7.2

org.apache.hive.shims

蜂巢0.23 -垫片

2.3.9

org.apache.hive.shims

hive-shims-common

2.3.9

org.apache.hive.shims

hive-shims-scheduler

2.3.9

org.apache.httpcomponents

httpclient

4.5.13

org.apache.httpcomponents

httpcore

4.4.14

org.apache.ivy

艾薇

2.5.0

org.apache.logging.log4j

log4j - 1.2 api

2.18.0

org.apache.logging.log4j

log4j api

2.18.0

org.apache.logging.log4j

log4j-core

2.18.0

org.apache.logging.log4j

log4j-slf4j-impl

2.18.0

org.apache.mesos

mesos-shaded-protobuf

1.4.0

org.apache.orc

orc-core

1.7.6

org.apache.orc

orc-mapreduce

1.7.6

org.apache.orc

orc-shims

1.7.6

org.apache.parquet

parquet-column

1.12.0-databricks-0007

org.apache.parquet

parquet-common

1.12.0-databricks-0007

org.apache.parquet

parquet-encoding

1.12.0-databricks-0007

org.apache.parquet

parquet-format-structures

1.12.0-databricks-0007

org.apache.parquet

parquet-hadoop

1.12.0-databricks-0007

org.apache.parquet

parquet-jackson

1.12.0-databricks-0007

org.apache.thrift

libfb303

0.9.3

org.apache.thrift

libthrift

0.12.0

org.apache.xbean

xbean-asm9-shaded

4.20

org.apache.yetus

audience-annotations

0.5.0

org.apache.zookeeper

动物园管理员

操作

org.apache.zookeeper

zookeeper-jute

操作

org.checkerframework

checker-qual

3.5.0

org.codehaus.jackson

jackson-core-asl

1.9.13

org.codehaus.jackson

jackson-mapper-asl

1.9.13

org.codehaus.janino

commons-compiler

3.0.16

org.codehaus.janino

janino

3.0.16

org.datanucleus

datanucleus-api-jdo

4.2.4

org.datanucleus

datanucleus-core

4.1.17

org.datanucleus

datanucleus-rdbms

4.1.19

org.datanucleus

javax.jdo

3.2.0-m3

org.eclipse.jetty

jetty-client

9.4.46.v20220331

org.eclipse.jetty

jetty-continuation

9.4.46.v20220331

org.eclipse.jetty

jetty-http

9.4.46.v20220331

org.eclipse.jetty

jetty-io

9.4.46.v20220331

org.eclipse.jetty

jetty-jndi

9.4.46.v20220331

org.eclipse.jetty

jetty-plus

9.4.46.v20220331

org.eclipse.jetty

jetty-proxy

9.4.46.v20220331

org.eclipse.jetty

jetty-security

9.4.46.v20220331

org.eclipse.jetty

jetty服务器

9.4.46.v20220331

org.eclipse.jetty

jetty servlet

9.4.46.v20220331

org.eclipse.jetty

jetty-servlets

9.4.46.v20220331

org.eclipse.jetty

jetty-util

9.4.46.v20220331

org.eclipse.jetty

jetty-util-ajax

9.4.46.v20220331

org.eclipse.jetty

jetty-webapp

9.4.46.v20220331

org.eclipse.jetty

jetty-xml

9.4.46.v20220331

org.eclipse.jetty.websocket

websocket-api

9.4.46.v20220331

org.eclipse.jetty.websocket

websocket-client

9.4.46.v20220331

org.eclipse.jetty.websocket

websocket-common

9.4.46.v20220331

org.eclipse.jetty.websocket

websocket服务器

9.4.46.v20220331

org.eclipse.jetty.websocket

websocket-servlet

9.4.46.v20220331

org.fusesource.leveldbjni

leveldbjni-all

1.8

org.glassfish.hk2

hk2-api

2.6.1

org.glassfish.hk2

hk2-locator

2.6.1

org.glassfish.hk2

hk2-utils

2.6.1

org.glassfish.hk2

osgi-resource-locator

1.0.3

org.glassfish.hk2.external

aopalliance-repackaged

2.6.1

org.glassfish.hk2.external

jakarta.inject

2.6.1

org.glassfish.jersey.containers

jersey-container-servlet

2.36

org.glassfish.jersey.containers

jersey-container-servlet-core

2.36

org.glassfish.jersey.core

jersey客户端

2.36

org.glassfish.jersey.core

jersey-common

2.36

org.glassfish.jersey.core

jersey-server

2.36

org.glassfish.jersey.inject

jersey-hk2

2.36

org.hibernate.validator

hibernate验证框架

6.1.0.Final

org.javassist

javassist

3.25.0-GA

org.jboss.logging

jboss-logging

3.3.2.Final

org.jdbi

jdbi

2.63.1

org.jetbrains

注释

17.0.0

org.joda

joda-convert

1.7

org.jodd

jodd-core

3.5.2

org.json4s

json4s-ast_2.12

3.7.0-M11

org.json4s

json4s-core_2.12

3.7.0-M11

org.json4s

json4s-jackson_2.12

3.7.0-M11

org.json4s

json4s-scalap_2.12

3.7.0-M11

org.lz4

lz4-java

1.8.0

org.mariadb.jdbc

mariadb-java-client

第2.7.4

org.mlflow

mlflow-spark

1.27.0

org.objenesis

objenesis

2.5.1

org.postgresql

postgresql

42.3.3

org.roaringbitmap

RoaringBitmap

0.9.25

org.roaringbitmap

垫片

0.9.25

org.rocksdb

rocksdbjni

6.24.2

org.rosuda.REngine

REngine

魅惑

org.scala-lang

scala-compiler_2.12

2.12.14

org.scala-lang

scala-library_2.12

2.12.14

org.scala-lang

scala-reflect_2.12

2.12.14

org.scala-lang.modules

scala-collection-compat_2.12

2.4.3

org.scala-lang.modules

scala-parser-combinators_2.12

1.1.2

org.scala-lang.modules

scala-xml_2.12

1.2.0

org.scala-sbt

测试界面

1.0

org.scalacheck

scalacheck_2.12

1.14.2

org.scalactic

scalactic_2.12

3.0.8

org.scalanlp

breeze-macros_2.12

1.2

org.scalanlp

breeze_2.12

1.2

org.scalatest

scalatest_2.12

3.0.8

org.slf4j

jcl-over-slf4j

1.7.36

org.slf4j

jul-to-slf4j

1.7.36

org.slf4j

slf4j-api

1.7.36

org.spark-project.spark

未使用的

1.0.0

org.threeten

threeten-extra

1.5.0

org.tukaani

xz

1.8

org.typelevel

algebra_2.12

2.0.1

org.typelevel

cats-kernel_2.12

2.1.1

org.typelevel

macro-compat_2.12

1.1.1

org.typelevel

spire-macros_2.12

0.17.0

org.typelevel

spire-bob体育客户端下载platform_2.12

0.17.0

org.typelevel

spire-util_2.12

0.17.0

org.typelevel

spire_2.12

0.17.0

org.wildfly.openssl

wildfly-openssl

1.0.7.Final

org.xerial

sqlite-jdbc

3.8.11.2

org.xerial.snappy

snappy-java

1.1.8.4

org.yaml

snakeyaml

1.24

奥罗

奥罗

2.0.8

pl.edu.icm

JLargeArrays

1.5

software.amazon.ion

ion-java

1.0.2中

stax

stax-api

1.0.1