砖运行时的10.3(不支持)
以下版本注释提供信息数据砖运行10.3和10.3砖运行时的光子,由Apache火花3.2.1之上。光子是在公共预览。2022年2月砖发布这些图片。
请注意
这些版本注释可能包括引用功能不可用这个版本的谷歌云。
新特性和改进
镶木地板和Avro作家现在重新定价时使用会话时区时间戳在拼花的数据源
现在拼花和Avro作家使用会话时区时间戳垫底术时遗产
模式,而不是使用默认的JVM时区。会话时区设置为JVM默认时区。
新功能在火花SQL
现在支持以下火花SQL函数在这个版本:
aes_decrypt通过使用AES:解密输入。
aes_encrypt:通过使用AES加密输入。
包含:决定一个表达式包含另一个表达式。
endswith:决定一个表达式结束与另一个表达式。
percentile_cont:返回一个百分比值。
startswith:决定一个表达式开始与另一个表达式。
低洗牌合并现在投入使用
δ合并成
命令使用了一种叫做低洗牌合并,从而减少洗牌的修改的行。这个命令的性能得到了很大的提高和帮助保护现有的集群在桌子上,如z值。这个功能是在砖运行时的9.0中引入的公共预览和已经达到了一般可用性。使低洗牌合并,集spark.databricks.delta.merge.enableLowShuffle
来真正的
。看到低洗牌合并砖。
新副本功能:验证模式和模式演化
验证方式:复制成
现在支持一个验证
模式的数据加载到一个表是验证但不写入表。这些验证包括:
是否可以解析数据。
表的模式匹配,或者是否需要进化的模式。
是否所有nullability和检查约束。
使用示例:
复制成<表>从<路径- - - - - -来- - - - - -文件>FILEFORMAT=<格式>验证(所有|<全国矿工工会- - - - - -行>行]
默认是验证所有数据的加载。您可以提供一个被认可的的行数行
关键字,如验证15行
。的复制成
语句返回的预览数据50行或更少,当使用小于50的数量行
关键字)。
模式演化:复制成
现在支持的模式演化mergeSchema
选项COPY_OPTIONS
。发展一个表的模式,你必须有自己的
权限在桌子上。
使用示例:
复制成<表>从<路径- - - - - -来- - - - - -文件>FILEFORMAT=<格式>COPY_OPTIONS(“mergeSchema”=“真正的”)
看到复制到。
标识列现在支持在三角洲表(公共预览版)
三角洲湖现在支持标识列。当你写δ表定义一个标识列,你不提供这一列的值,三角洲现在自动分配一个独特的和统计上增加或减少的值。看到创建表(使用)。
库升级
升级的Python库:
distlib 0.3.3 0.3.4
filelock 3.4.0 3.4.2
numpy 1.19.2 1.20.1
情节从5.3.1到发送的
升级R库:
补丁1.4.0 1.4.1
1.1.3从1.1.2生动
扫帚0.7.10 0.7.11
从-20年7.3 -19 7.3类
cpp11 0.4.1 0.4.2
DBI 1.1.1 1.1.2
devtools 2.4.2 2.4.3
摘要从0.6.28 0.6.29
dtplyr 1.1.0 1.2.0
fansi 0.5.0 1.0.2中
国外从-81年0.8到0.8 -82
fs 1.5.2 1.5.0
哥特3 1.5.0
胶水1.6.0 1.5.0
httpuv 1.6.3 1.6.5
1.7.3 jsonlite从1.7.2
knitr从1.36到1.37
质量从7.3 -54 7.3 -55人
矩阵从1.3 4到1.4 0
nlme从3.1 -152 3.1 -155
nnet纳7.3 -16 7.3 -17人
openssl 1.4.5 1.4.6
平行1.29.0 1.30.0
pkgbuild 1.2.0 1.3.1
从1.2.3 pkgload 1.2.4
progressr 0.9.0 0.10.0
Rcpp 1.0.7 1.0.8
2.1.1 readr从魅惑
2.4.2遥控器从2.4.1
RSQLite 2.2.8 2.2.9
从这次1.2.1 sessioninfo 1.2.2
1.7.4 sparklyr从1.7.2
testthat 3.1.0 3.1.1
tinytex从0.35到0.36
usethis 2.1.3 2.1.5节讨论
发呜呜声1.5.6 1.5.7
withr 2.4.2 2.4.3
xfun从0.28到0.29
1.3.3 xml2从1.3.2
升级Java库:
dev.ludovic.netlib.arpack 1.3.2 2.2.1
dev.ludovic.netlib.blas 1.3.2 2.2.1
dev.ludovic.netlib.lapack 1.3.2 2.2.1
io.delta.delta-sharing-spark_2.12 0.2.0 0.3.0
Apache火花
砖10.3运行时包含Apache火花3.2.1之上。这个版本包括所有火花修复和改进中砖运行时的10.2(不支持)以及以下额外的bug修复和改进了火花:
(火花- 37896)[SQL]实现ConstantColumnVector和提高性能隐藏文件的元数据
(火花- 37924)[SQL]排序表的关键属性显示在视图上创建表(v1)
(火花- 37636)[SQL]迁移创建默认名称空间使用V2命令
(火花- 37381)[SQL]统一v1和v2显示创建表测试
(火花- 37876)(核心)[SQL]
SpecificParquetRecordReaderBase.listDirectory
来TestUtils
(火花- 37854)(核心)用火花代码中的模式匹配替换类型检查
(火花- 36967)(核心)报告准确洗牌块大小如果其倾斜
(火花- 37864)[SQL]支持矢量化读取布尔值使用RLE编码与拼花DataPage V2
(火花- 37862)[SQL] RecordBinaryComparator应该快速跳过检查与对齐校准的平台bob体育客户端下载
(火花- 37855)[SQL] IllegalStateException当转换在一个嵌套的结构体数组
(火花- 37858)[SQL]扔
SparkRuntimeException
从AES与错误类功能(火花- 37841)[SQL] BasicWriteTaskStatsTracker不应该获得一个跳过文件的状态
(火花- 37860)(UI)修复taskindex舞台页面任务事件时间表
(火花- 36879)[SQL]支持拼花v2数据页面编码(DELTA_BINARY_PACKED)矢量化的道路
(火花- 37828)通过RebalancePartitions [SQL]压低过滤器
(火花- 37802)[SQL][3.2]复合字段名称应与总压低
(火花- 37826)[SQL]使用zstd编解码器的名字在兽人蜂巢兽人impl文件名
(火花- 37820)[SQL]替换ApacheCommonBase64 JavaBase64字符串函数
(火花- 37832)[SQL]兽人struct转换器应该使用一个数组来查找字段转换器,而不是一个链表
(火花- 37786)[SQL] StreamingQueryListener SQLConf支持使用。得到相应的SessionState SQLConf
(火花- 37527)[SQL]翻译标准聚合函数叠加
(火花- 37777)[SQL]更新显示函数的SQL语法
(火花- 8582)(核心)检查点急切地当被要求这样做
(火花- 37822)[SQL] StringSplit应该返回一个数组在非空元素
(火花- 37812)[SQL]当反序列化一个兽人结构时,在可能的情况下重用结果行
(火花- 37367)[SQL]使再能在DDLParserSuite异常测试。创建视图——基本
(火花- 37796)[SQL] ByteArrayMethods arrayEquals应该快速跳过检查与对齐校准的平台bob体育客户端下载
(火花- 37817)[SQL][小]complexTypeExtractors.scala删除的代码
(火花- 37807)[SQL]修复中的HttpAuthenticationException错误消息
(火花- 37750)[SQL] ANSI模式:选择返回null结果如果元素不存在于数组/地图
(火花- 37789)[SQL]添加一个类来表示一般聚合函数在DS V2
(火花- 37785)[SQL](核心)添加Utils.isInRunningSparkTask
(火花- 37780)[SQL] QueryExecutionListener SQLConf支持使用。得到相应的SessionState SQLConf
(火花- 37783)[SS] [SQL][心]尽可能使尾部递归
(火花- 37726)[SQL]添加泄漏规模指标排序合并连接
(火花- 37800)[SQL] TreeNode。argString错误类型的格式参数设置(_)
(火花- 37716)[SQL]改善错误消息当LateralJoin非确定性表达式
(火花- 37779)[SQL]使ColumnarToRowExec canonicalizable(反)序列化后的计划
(火花- 37578)[SQL]从ds v2更新任务指标自定义指标
(火花- 37676)[SQL]支持ANSI聚合函数:percentile_cont
(火花- 37724)[SQL] ANSI模式:默认情况下禁用ANSI保留关键字
(火花- 37705)[SQL][3.2]变基时间戳在会话时区保存在拼花/ Avro元数据
(火花- 34755)[SQL]支持变换数字格式的跑龙套
(火花- 36703)[SQL]删除如果RepartitionByExpression的孩子
(火花- 37369)[SQL]避免冗余ColumnarToRow transistion InMemoryTableScan
(火花- 37450)从生成[SQL]删除不必要的字段
(火花- 37728)[SQL]阅读与兽人嵌套列矢量化读者可以导致ArrayIndexOutOfBoundsException
(火花- 37564)[SQL]添加代码生成总没有分组关键字
(火花- 37659)[UI][3.2]修复FsHistoryProvider之间的竞争条件和删除日志信息列表
(火花- 37727)[SQL]显示忽略设计&隐藏警告SparkSession.builder.getOrCreate配置已经设置
(火花- 37391)[SQL] JdbcConnectionProvider告诉如果修改安全上下文
(火花- 37273)[SQL]支持隐藏在火花SQL文件元数据列
(火花- 36876)HiveTableScanExec [SQL]支持动态分区修剪
(火花- 37546)[SQL] V2 ReplaceTableAsSelect命令应该限定位置
(火花- 37545)[SQL] V2 CreateTableAsSelect命令应该限定位置
(火花- 37707)[SQL]允许存储分配和隐式铸datetime类型之一
(火花- 37644)[SQL]支持数据源v2完成总叠加
(火花- 37695)(核心)(SHUFFLE)跳过诊断ob街区合并了基于推的洗牌
(火花- 35295)(毫升)取代完全由dev.ludovic.netlib com.github.fommil.netlib: 2.0
(火花- 37694)[SQL]不允许删除资源火花SQL cli
(火花- 37330)[SQL] ReplaceTableStatement迁移到v2命令
(火花- 27974)[SQL]支持ANSI聚合函数:array_agg
(火花- 36902)[SQL] CreateTableAsSelectStatement迁移到v2命令
(火花- 37678)(PYTHON)修复清理and_return签名
(火花- 37613)[SQL]支持ANSI聚合函数:regr_count
(火花- 37689)[SQL]在PropagateEmptyRelation应该支持扩张
(火花- 37654)行[SQL]修复肺水肿。得到Seq when field is Null
(火花- 37496)[SQL] ReplaceTableAsSelectStatement迁移到v2命令
(火花- 37483)[SQL]支持压低前N JDBC数据源V2
(火花- 37577)[SQL]修复ClassCastException: ArrayType不能为生成StructType修剪
(火花- 37310)[SQL]迁移改变名称空间…设置属性默认使用V2命令
(火花- 37501)[SQL]创建/替换表应该限定位置v2命令
(火花- 37343)[SQL]实现方法createIndex IndexExists和dropIndex JDBC (Postgres方言)
(火花- 37060)[心][3.2]处理驱动程序备份状态回应主人
(火花- 37629)[SQL]加速Expression.canonicalized
(火花- 37633)[SQL]打开演员应该跳过如果沮丧失败…
(火花- 37631)[SQL]代码清理促进字符串输入数学函数的两倍
(火花- 37569)[SQL]不嵌套视图字段标记为可空
(火花- 37557)[SQL]替换对象散列总如果孩子已经排序的排序
(火花- 36850)[SQL] CreateTableStatement迁移到v2命令框架
(火花- 37592)[SQL]提高性能
JoinSelection
(火花- 37217)[SQL]动态分区的数量应该早期检查写作时,外部表
(火花- 37584)[SQL]新的SQL函数:map_contains_key
(火花- 37455)[SQL]散列替换为总如果孩子已经排序的排序
(火花- 34735)[SQL] [UI]添加修改配置SQL执行的UI
(火花- 37540)[SQL]发现更多的不支持的时间旅行
(火花- 37376)[SQL]引入一个新的数据源HasPartitionKey V2接口
(火花- 37666)[SQL]设置
GCM
为默认模式aes_encrypt ()
/aes_decrypt ()
(火花- 37573)[SQL] IsolatedClientLoader应该回退相关版本,并不总是hadoop-2.7.4
(火花- 37561)[SQL]当获得蜂巢DelegationToken避免加载所有功能
(火花- 37370)[SQL]添加SQL配置控制新增3.3中加入代码生成
(火花- 37311)[SQL]迁移改变名称空间…位置设置为默认使用V2命令
(火花- 37192)[SQL]显示TBLPROPERTIES迁移到默认使用V2命令
(火花- 37219)[SQL]增加语法的支持
(火花- 37316)[SQL]为存在分类合并连接添加代码生成
(火花- 37591)[SQL]支持GCM模式
aes_encrypt ()
/aes_decrypt ()
(火花- 37586)[SQL]添加
模式
和填充
参数,aes_encrypt ()
/aes_decrypt ()
(火花- 12567)[SQL]添加aes_encrypt和aes_decrypt装入的功能
(火花- 37392)[SQL]推断时修复性能缺陷产生的约束
(火花- 37481)(核心)(WebUI)修复消失,跳过阶段后重试
(火花- 37533)[SQL]新的SQL函数:try_element_at
(火花- 37451)[SQL]如果spark.sql.legacy解决字符串类型转换为十进制的类型。allowNegativeScaleOfDecimal启用
(火花- 37062)[SS]引入一个新的数据源提供每microbatch组一致的行
(火花- 37552)[SQL]添加
convert_timezone ()
函数(火花- 37555)[SQL] spark-sql应该通过打开评论到后端
(火花- 37286)[SQL]移动compileAggregates JDBCRDD JdbcDialect
(火花- 37485)(核心)[SQL]替换
地图
表达式产生任何结果foreach
(火花- 37556)[SQL] des无效类与Java序列化失败
(火花- 37520)[SQL]添加
startswith ()
和endswith ()
字符串函数(火花- 37471)[SQL] spark-sql支持
;
在嵌套的括号注释(火花- 37360)[SQL]支持TimestampNTZ JSON数据源
(火花- 37508)[SQL]添加包含字符串()函数
(火花- 37494)[SQL]统一v1和v2选项的输出
显示创建表
命令(火花- 37524)[SQL]我们应该删除所有表后测试动态分区修剪。
(火花- 37389)[SQL]检查打开括号注释
(火花- 37220)[SQL]不输入文件分割为拼花读者总压低
(火花- 37326)[SQL]支持TimestampNTZ CSV数据源
(火花- 35867)[SQL]使VectorizedPlainValuesReader.readBooleans矢量化阅读
(火花- 37484)(核心)[SQL]替换
得到
和getOrElse
与getOrElse
(火花- 37492)[SQL]优化与withAllNativeOrcReaders兽人测试代码
(火花- 37458)[SS]删除不必要的SerializeFromObject foreachBatch计划
系统环境
操作系统:Ubuntu 20.04.3 LTS
Java:祖鲁8.56.0.21-CA-linux64
Scala:2.12.14
Python:3.8.10
R:4.1.2
三角洲湖:1.1.0
安装Python库
图书馆 |
版本 |
图书馆 |
版本 |
图书馆 |
版本 |
---|---|---|---|---|---|
Antergos Linux |
2015.10 (ISO-Rolling) |
appdirs |
1.4.4 |
argon2-cffi |
20.1.0 |
async-generator |
1.10 |
attrs |
20.3.0 |
backcall |
0.2.0 |
bidict |
0.21.4 |
漂白剂 |
3.3.0 |
boto3 |
1.16.7 |
botocore |
1.19.7 |
certifi |
2020.12.5 |
cffi |
1.14.5 |
chardet |
4.0.0 |
周期计 |
0.10.0 |
Cython |
0.29.23 |
dbus-python |
1.2.16 |
装饰 |
5.0.6 |
defusedxml |
是0.7.1 |
distlib |
0.3.4 |
distro-info |
0.23 ubuntu1 |
entrypoints |
0.3 |
facets-overview |
1.0.0 |
filelock |
3.4.2 |
idna |
2.10 |
ipykernel |
5.3.4 |
ipython |
7.22.0 |
ipython-genutils |
0.2.0 |
ipywidgets |
7.6.3 |
绝地武士 |
0.17.2 |
Jinja2 |
14 |
jmespath |
0.10.0 |
joblib |
1.0.1 |
jsonschema |
3.2.0 |
jupyter-client |
6.1.12 |
jupyter-core |
4.7.1 |
jupyterlab-pygments |
0.1.2 |
jupyterlab-widgets |
1.0.0 |
kiwisolver |
1.3.1 |
考拉 |
1.8.2 |
MarkupSafe |
2.0.1 |
matplotlib |
3.4.2 |
使走调 |
0.8.4 |
nbclient |
0.5.3 |
nbconvert |
6.0.7 |
nbformat |
5.1.3 |
nest-asyncio |
1.5.1 |
笔记本 |
6.3.0 |
numpy |
1.20.1 |
包装 |
20.9 |
熊猫 |
1.2.4 |
pandocfilters |
3 |
parso |
0.7.0 |
容易受骗的人 |
0.5.1 |
pexpect |
4.8.0 |
pickleshare |
0.7.5 |
枕头 |
8.2.0 |
皮普 |
21.0.1 |
情节 |
发送的 |
prometheus-client |
0.10.1 |
prompt-toolkit |
3.0.17 |
protobuf |
3.17.2 |
psycopg2 |
2.8.5 |
ptyprocess |
0.7.0 |
pyarrow |
4.0.0 |
pycparser |
2.20 |
Pygments |
2.8.1发布 |
PyGObject |
3.36.0 |
pyparsing |
2.4.7 |
pyrsistent |
0.17.3 |
python-apt |
2.0.0 + ubuntu0.20.4.6 |
python-dateutil |
2.8.1发布 |
python-engineio |
4.3.0 |
python-socketio |
5.4.1之前 |
pytz |
2020.5 |
pyzmq |
20.0.0 |
请求 |
2.25.1 |
requests-unixsocket |
0.2.0 |
s3transfer |
0.3.7 |
scikit-learn |
0.24.1 |
scipy |
1.6.2 |
seaborn |
0.11.1 |
Send2Trash |
1.5.0 |
setuptools |
52.0.0 |
六个 |
1.15.0 |
ssh-import-id |
5.10 |
statsmodels |
0.12.2 |
韧性 |
8.0.1 |
terminado |
0.9.4 |
testpath |
0.4.4 |
threadpoolctl |
魅惑 |
龙卷风 |
6.1 |
traitlets |
5.0.5 |
unattended-upgrades |
0.1 |
urllib3 |
1.25.11 |
virtualenv |
20.4.1 |
wcwidth |
0.2.5 |
webencodings |
0.5.1 |
轮 |
0.36.2 |
widgetsnbextension |
3.5.1 |
安装R库
R库的安装微软在2022-01-19凹口快照。
图书馆 |
版本 |
图书馆 |
版本 |
图书馆 |
版本 |
---|---|---|---|---|---|
askpass |
1.1 |
为了 |
0.2.1 |
补丁 |
1.4.1 |
基地 |
4.1.2 |
base64enc |
0.1 - 3 |
位 |
4.0.4 |
bit64 |
你 |
团 |
1.2.2 |
引导 |
-28 - 1.3 |
酿造 |
1.0 6 |
生动 |
1.1.3 |
扫帚 |
0.7.11 |
bslib |
0.3.1 |
cachem |
1.0.6 |
callr |
3.7.0 |
脱字符号 |
-90 - 6.0 |
cellranger |
1.1.0 |
时间 |
-56 - 2.3 |
类 |
-20 - 7.3 |
cli |
3.1.0 |
clipr |
是0.7.1 |
集群 |
2.1.2 |
codetools |
-18 - 0.2 |
色彩 |
2.0 - 2 |
commonmark |
1.7 |
编译器 |
4.1.2 |
配置 |
0.3.1 |
cpp11 |
0.4.2 |
蜡笔 |
1.4.2 |
凭证 |
1.3.2 |
旋度 |
4.3.2 |
data.table |
1.14.2 |
数据集 |
4.1.2 |
DBI |
1.1.2 |
dbplyr |
2.1.1 |
desc |
1.4.0 |
devtools |
2.4.3 |
diffobj |
0.3.5 |
消化 |
0.6.29 |
dplyr |
1.0.7 |
dtplyr |
1.2.0 |
e1071 |
1.7 9 |
省略 |
0.3.2 |
评估 |
0.14 |
fansi |
1.0.2中 |
farver |
魅惑 |
fastmap |
1.1.0 |
fontawesome |
0.2.2 |
forcats |
0.5.1 |
foreach |
1.5.1 |
外国 |
-82 - 0.8 |
打造 |
0.2.0 |
fs |
1.5.2 |
未来 |
1.23.0 |
future.apply |
1.8.1 |
含漱剂 |
1.2.0 |
泛型 |
0.1.1 |
哥特 |
1.5.0 |
ggplot2 |
3.3.5 |
“大酒店” |
1.3.0 |
gitcreds |
0.1.1 |
glmnet |
4.1 - 3 |
全局变量 |
0.14.0 |
胶水 |
1.6.0 |
googledrive |
2.0.0 |
googlesheets4 |
1.0.0 |
高尔 |
0.2.2 |
图形 |
4.1.2 |
grDevices |
4.1.2 |
网格 |
4.1.2 |
gridExtra |
2.3 |
gsubfn |
0.7 |
gtable |
0.3.0 |
还 |
2.4.3 |
highr |
0.9 |
hms |
1.1.1 |
htmltools |
0.5.2 |
htmlwidgets |
1.5.4 |
httpuv |
1.6.5 |
httr |
1.4.2 |
hwriter |
1.3.2 |
hwriterPlus |
1.0 - 3 |
id |
1.0.1 |
ini |
0.3.1 |
不小 |
-12 - 0.9 |
isoband |
0.2.5 |
迭代器 |
1.0.13 |
jquerylib |
0.1.4 |
jsonlite |
1.7.3 |
KernSmooth |
-20 - 2.23 |
knitr |
1.37 |
标签 |
0.4.2 |
晚些时候 |
1.3.0 |
晶格 |
-45 - 0.20 |
熔岩 |
1.6.10 |
生命周期 |
1.0.1 |
listenv |
0.8.0 |
lubridate |
1.8.0 |
magrittr |
2.0.1 |
减价 |
1.1 |
质量 |
-55 - 7.3 |
矩阵 |
1.4 0 |
memoise |
2.0.1 |
方法 |
4.1.2 |
mgcv |
-38 - 1.8 |
mime |
0.12 |
ModelMetrics |
1.2.2.2 |
modelr |
0.1.8 |
孟塞尔 |
0.5.0 |
nlme |
-155 - 3.1 |
nnet |
-17 - 7.3 |
numDeriv |
2016.8 - -1.1 |
openssl |
1.4.6 |
平行 |
4.1.2 |
平行 |
1.30.0 |
支柱 |
1.6.4, |
pkgbuild |
1.3.1 |
pkgconfig |
2.0.3 |
pkgload |
1.2.4 |
plogr |
0.2.0 |
plyr |
1.8.6 |
赞美 |
1.0.0 |
prettyunits |
1.1.1 |
pROC |
1.18.0 |
processx |
3.5.2 |
prodlim |
2019.11.13 |
进步 |
1.2.2 |
progressr |
0.10.0 |
承诺 |
1.2.0.1 |
原型 |
1.0.0 |
代理 |
-26 - 0.4 |
ps |
1.6.0 |
purrr |
0.3.4 |
r2d3 |
0.2.5 |
R6 |
2.5.1 |
randomForest |
-14 - 4.6 |
rappdirs |
0.3.3 |
rcmdcheck |
1.4.0 |
RColorBrewer |
1.1 - 2 |
Rcpp |
1.0.8 |
RcppEigen |
0.3.3.9.1 |
readr |
2.1.1 |
readxl |
1.3.1 |
食谱 |
0.1.17 |
复赛 |
1.0.1 |
rematch2 |
2.1.2 |
遥控器 |
2.4.2 |
reprex |
2.0.1 |
reshape2 |
1.4.4 |
rlang |
0.4.12 |
rmarkdown |
2.11 |
RODBC |
-19 - 1.3 |
roxygen2 |
7.1.2 |
rpart |
-15 - 4.1 |
rprojroot |
2.0.2 |
Rserve |
-10 - 1.8 |
RSQLite |
2.2.9 |
rstudioapi |
0.13 |
rversions |
2.1.1 |
房车 |
1.0.2中 |
萨斯 |
0.4.0 |
尺度 |
1.1.1 |
selectr |
0.4 - 2 |
sessioninfo |
1.2.2 |
形状 |
1.4.6 |
闪亮的 |
1.7.1上 |
sourcetools |
0.1.7 |
sparklyr |
1.7.4 |
SparkR |
3.2.0 |
空间 |
-11 - 7.3 |
样条函数 |
4.1.2 |
sqldf |
-11 - 0.4 |
SQUAREM |
2021.1 |
统计数据 |
4.1.2 |
stats4 |
4.1.2 |
stringi |
1.7.6 |
stringr |
1.4.0 |
生存 |
-13 - 3.2 |
sys |
3.4 |
tcltk |
4.1.2 |
TeachingDemos |
2.10 |
testthat |
3.1.1 |
宠物猫 |
3.1.6 |
tidyr |
1.1.4 |
tidyselect |
1.1.1 |
tidyverse |
1.3.1 |
timeDate |
3043.102 |
tinytex |
0.36 |
工具 |
4.1.2 |
tzdb |
0.2.0 |
usethis |
2.1.5 |
use utf8 |
1.2.2 |
跑龙套 |
4.1.2 |
uuid |
1.0 - 3 |
vctrs |
0.3.8 |
viridisLite |
0.4.0 |
发呜呜声 |
1.5.7 |
沃尔多 |
0.3.1 |
晶须 |
0.4 |
withr |
2.4.3 |
xfun |
0.29 |
xml2 |
1.3.3 |
xopen |
1.0.0 |
xtable |
1.8 - 4 |
yaml |
2.2.1 |
邮政编码 |
2.2.0 |
安装了Java和Scala库(Scala 2.12集群版)
组ID |
工件ID |
版本 |
---|---|---|
antlr |
antlr |
2.7.7 |
com.amazonaws |
amazon-kinesis-client |
1.12.0 |
com.amazonaws |
aws-java-sdk-autoscaling |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudformation |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudfront |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudhsm |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudsearch |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudtrail |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudwatch |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudwatchmetrics |
1.11.655 |
com.amazonaws |
aws-java-sdk-codedeploy |
1.11.655 |
com.amazonaws |
aws-java-sdk-cognitoidentity |
1.11.655 |
com.amazonaws |
aws-java-sdk-cognitosync |
1.11.655 |
com.amazonaws |
aws-java-sdk-config |
1.11.655 |
com.amazonaws |
aws-java-sdk-core |
1.11.655 |
com.amazonaws |
aws-java-sdk-datapipeline |
1.11.655 |
com.amazonaws |
aws-java-sdk-directconnect |
1.11.655 |
com.amazonaws |
aws-java-sdk-directory |
1.11.655 |
com.amazonaws |
aws-java-sdk-dynamodb |
1.11.655 |
com.amazonaws |
aws-java-sdk-ec2 |
1.11.655 |
com.amazonaws |
aws-java-sdk-ecs |
1.11.655 |
com.amazonaws |
aws-java-sdk-efs |
1.11.655 |
com.amazonaws |
aws-java-sdk-elasticache |
1.11.655 |
com.amazonaws |
aws-java-sdk-elasticbeanstalk |
1.11.655 |
com.amazonaws |
aws-java-sdk-elasticloadbalancing |
1.11.655 |
com.amazonaws |
aws-java-sdk-elastictranscoder |
1.11.655 |
com.amazonaws |
aws-java-sdk-emr |
1.11.655 |
com.amazonaws |
aws-java-sdk-glacier |
1.11.655 |
com.amazonaws |
aws-java-sdk-glue |
1.11.655 |
com.amazonaws |
aws-java-sdk-iam |
1.11.655 |
com.amazonaws |
aws-java-sdk-importexport |
1.11.655 |
com.amazonaws |
aws-java-sdk-kinesis |
1.11.655 |
com.amazonaws |
aws-java-sdk-kms |
1.11.655 |
com.amazonaws |
aws-java-sdk-lambda |
1.11.655 |
com.amazonaws |
aws-java-sdk-logs |
1.11.655 |
com.amazonaws |
aws-java-sdk-machinelearning |
1.11.655 |
com.amazonaws |
aws-java-sdk-opsworks |
1.11.655 |
com.amazonaws |
aws-java-sdk-rds |
1.11.655 |
com.amazonaws |
aws-java-sdk-redshift |
1.11.655 |
com.amazonaws |
aws-java-sdk-route53 |
1.11.655 |
com.amazonaws |
aws-java-sdk-s3 |
1.11.655 |
com.amazonaws |
aws-java-sdk-ses |
1.11.655 |
com.amazonaws |
aws-java-sdk-simpledb |
1.11.655 |
com.amazonaws |
aws-java-sdk-simpleworkflow |
1.11.655 |
com.amazonaws |
aws-java-sdk-sns |
1.11.655 |
com.amazonaws |
aws-java-sdk-sqs |
1.11.655 |
com.amazonaws |
aws-java-sdk-ssm |
1.11.655 |
com.amazonaws |
aws-java-sdk-storagegateway |
1.11.655 |
com.amazonaws |
aws-java-sdk-sts |
1.11.655 |
com.amazonaws |
aws-java-sdk-support |
1.11.655 |
com.amazonaws |
aws-java-sdk-swf-libraries |
1.11.22 |
com.amazonaws |
aws-java-sdk-workspaces |
1.11.655 |
com.amazonaws |
jmespath-java |
1.11.655 |
com.chuusai |
shapeless_2.12 |
2.3.3 |
com.clearspring.analytics |
流 |
2.9.6 |
com.databricks |
Rserve |
1.8 - 3 |
com.databricks |
jets3t |
0.7.1-0 |
com.databricks.scalapb |
compilerplugin_2.12 |
0.4.15-10 |
com.databricks.scalapb |
scalapb-runtime_2.12 |
0.4.15-10 |
com.esotericsoftware |
kryo-shaded |
4.0.2 |
com.esotericsoftware |
minlog |
1.3.0 |
com.fasterxml |
同学 |
1.3.4 |
com.fasterxml.jackson.core |
jackson-annotations |
2.12.3 |
com.fasterxml.jackson.core |
jackson-core |
2.12.3 |
com.fasterxml.jackson.core |
jackson-databind |
2.12.3 |
com.fasterxml.jackson.dataformat |
jackson-dataformat-cbor |
2.12.3 |
com.fasterxml.jackson.datatype |
jackson-datatype-joda |
2.12.3 |
com.fasterxml.jackson.module |
jackson-module-paranamer |
2.12.3 |
com.fasterxml.jackson.module |
jackson-module-scala_2.12 |
2.12.3 |
com.github.ben-manes.caffeine |
咖啡因 |
2.3.4 |
com.github.fommil |
jniloader |
1.1 |
com.github.fommil.netlib |
核心 |
1.1.2 |
com.github.fommil.netlib |
native_ref-java |
1.1 |
com.github.fommil.netlib |
native_ref-java-natives |
1.1 |
com.github.fommil.netlib |
native_system-java |
1.1 |
com.github.fommil.netlib |
native_system-java-natives |
1.1 |
com.github.fommil.netlib |
netlib-native_ref-linux-x86_64-natives |
1.1 |
com.github.fommil.netlib |
netlib-native_system-linux-x86_64-natives |
1.1 |
com.github.luben |
zstd-jni |
1.5.0-4 |
com.github.wendykierp |
JTransforms |
3.1 |
com.google.code.findbugs |
jsr305 |
3.0.0 |
com.google.code.gson |
gson |
2.8.6 |
com.google.crypto.tink |
叮叮铃 |
1.6.0 |
com.google.flatbuffers |
flatbuffers-java |
1.9.0 |
com.google.guava |
番石榴 |
15.0 |
com.google.protobuf |
protobuf-java |
2.6.1 |
com.h2database |
h2 |
1.4.195 |
com.helger |
分析器 |
1.1.1 |
com.jcraft |
jsch |
0.1.50 |
com.jolbox |
bonecp |
0.8.0.RELEASE |
com.lihaoyi |
sourcecode_2.12 |
0.1.9 |
com.microsoft.azure |
azure-data-lake-store-sdk |
2.3.9 |
com.microsoft.sqlserver |
mssql-jdbc |
9.2.1.jre8 |
com.ning |
compress-lzf |
1.0.3 |
com.sun.istack |
istack-commons-runtime |
3.0.8 |
com.sun.mail |
javax.mail |
1.5.2 |
com.tdunning |
json |
1.8 |
com.thoughtworks.paranamer |
paranamer |
2.8 |
com.trueaccord.lenses |
lenses_2.12 |
0.4.12 |
com.twitter |
chill-java |
0.10.0 |
com.twitter |
chill_2.12 |
0.10.0 |
com.twitter |
util-app_2.12 |
7.1.0 |
com.twitter |
util-core_2.12 |
7.1.0 |
com.twitter |
util-function_2.12 |
7.1.0 |
com.twitter |
util-jvm_2.12 |
7.1.0 |
com.twitter |
util-lint_2.12 |
7.1.0 |
com.twitter |
util-registry_2.12 |
7.1.0 |
com.twitter |
util-stats_2.12 |
7.1.0 |
com.typesafe |
配置 |
1.2.1 " |
com.typesafe.scala-logging |
scala-logging_2.12 |
3.7.2章 |
com.univocity |
univocity-parsers |
2.9.1 |
com.zaxxer |
HikariCP |
4.0.3 |
commons-cli |
commons-cli |
1.2 |
commons-codec |
commons-codec |
1.15 |
commons-collections |
commons-collections |
3.2.2 |
commons-dbcp |
commons-dbcp |
1.4 |
commons-fileupload |
commons-fileupload |
1.3.3 |
commons-httpclient |
commons-httpclient |
3.1 |
commons-io |
commons-io |
2.8.0 |
commons lang |
commons lang |
2.6 |
通用日志 |
通用日志 |
1.1.3 |
commons net |
commons net |
3.1 |
commons-pool |
commons-pool |
1.5.4 |
dev.ludovic.netlib |
arpack |
2.2.1 |
dev.ludovic.netlib |
布拉斯特区 |
2.2.1 |
dev.ludovic.netlib |
lapack |
2.2.1 |
蜂巢3.2 - 2.3 - __hadoop - |
jets3t - 0.7 |
liball_deps_2.12 |
info.ganglia.gmetric4j |
gmetric4j |
1.0.10 |
io.airlift |
aircompressor |
0.21 |
io.delta |
delta-sharing-spark_2.12 |
0.3.0 |
io.dropwizard.metrics |
metrics-core |
以下4.4.1 |
io.dropwizard.metrics |
metrics-graphite |
以下4.4.1 |
io.dropwizard.metrics |
metrics-healthchecks |
以下4.4.1 |
io.dropwizard.metrics |
metrics-jetty9 |
以下4.4.1 |
io.dropwizard.metrics |
metrics-jmx |
以下4.4.1 |
io.dropwizard.metrics |
metrics-json |
以下4.4.1 |
io.dropwizard.metrics |
metrics-jvm |
以下4.4.1 |
io.dropwizard.metrics |
metrics-servlets |
以下4.4.1 |
io.netty |
netty-all |
4.1.68.Final |
io.prometheus |
simpleclient |
0.7.0 |
io.prometheus |
simpleclient_common |
0.7.0 |
io.prometheus |
simpleclient_dropwizard |
0.7.0 |
io.prometheus |
simpleclient_pushgateway |
0.7.0 |
io.prometheus |
simpleclient_servlet |
0.7.0 |
io.prometheus.jmx |
收集器 |
0.12.0 |
jakarta.annotation |
jakarta.annotation-api |
1.3.5 |
jakarta.servlet |
jakarta.servlet-api |
4.0.3 |
jakarta.validation |
jakarta.validation-api |
2.0.2 |
jakarta.ws.rs |
jakarta.ws.rs-api |
2.1.6 |
javax.activation |
激活 |
1.1.1 |
javax.annotation |
javax.annotation-api |
1.3.2 |
javax.el |
javax.el-api |
2.2.4 |
javax.jdo |
jdo api |
3.0.1 |
javax.transaction |
jta |
1.1 |
javax.transaction |
事务api |
1.1 |
javax.xml.bind |
jaxb-api |
2.2.2 |
javax.xml.stream |
stax-api |
1.0 - 2 |
javolution |
javolution |
5.5.1 |
jline |
jline |
2.14.6 |
joda-time |
joda-time |
2.10.10 |
log4j |
apache-log4j-extras |
1.2.17 |
log4j |
log4j |
1.2.17 |
maven-trees |
蜂巢3.2 - 2.3 - __hadoop - |
liball_deps_2.12 |
net.java.dev.jna |
jna |
5.8.0 |
net.razorvine |
地幔岩 |
4.30 |
net.sf.jpam |
jpam |
1.1 |
net.sf.opencsv |
opencsv |
2.3 |
net.sf.supercsv |
super-csv |
2.2.0 |
net.snowflake |
snowflake-ingest-sdk |
0.9.6 |
net.snowflake |
snowflake-jdbc |
3.13.3 |
net.snowflake |
spark-snowflake_2.12 |
2.9.0-spark_3.1 |
net.sourceforge.f2j |
arpack_combined_all |
0.1 |
org.acplt.remotetea |
remotetea-oncrpc |
1.1.2 |
org.antlr |
ST4 |
4.0.4 |
org.antlr |
antlr-runtime |
3.5.2 |
org.antlr |
antlr4-runtime |
4.8 |
org.antlr |
stringtemplate |
3.2.1之上 |
org.apache.ant |
蚂蚁 |
1.9.2 |
org.apache.ant |
ant-jsch |
1.9.2 |
org.apache.ant |
ant-launcher |
1.9.2 |
org.apache.arrow |
arrow-format |
2.0.0 |
org.apache.arrow |
arrow-memory-core |
2.0.0 |
org.apache.arrow |
arrow-memory-netty |
2.0.0 |
org.apache.arrow |
arrow-vector |
2.0.0 |
org.apache.avro |
avro |
1.10.2 |
org.apache.avro |
avro-ipc |
1.10.2 |
org.apache.avro |
avro-mapred |
1.10.2 |
org.apache.commons |
commons-compress |
1.21 |
org.apache.commons |
commons-crypto |
1.1.0 |
org.apache.commons |
commons-lang3 |
3.12.0 |
org.apache.commons |
commons-math3 |
3.4.1 |
org.apache.commons |
commons-text |
1.6 |
org.apache.curator |
curator-client |
2.13.0 |
org.apache.curator |
curator-framework |
2.13.0 |
org.apache.curator |
curator-recipes |
2.13.0 |
org.apache.derby |
德比 |
10.14.2.0 |
org.apache.hadoop |
hadoop-client-api |
3.3.1-databricks |
org.apache.hadoop |
hadoop-client-runtime |
3.3.1 |
org.apache.hive |
hive-beeline |
2.3.9 |
org.apache.hive |
hive-cli |
2.3.9 |
org.apache.hive |
hive-jdbc |
2.3.9 |
org.apache.hive |
hive-llap-client |
2.3.9 |
org.apache.hive |
hive-llap-common |
2.3.9 |
org.apache.hive |
hive-serde |
2.3.9 |
org.apache.hive |
hive-shims |
2.3.9 |
org.apache.hive |
hive-storage-api |
2.7.2 |
org.apache.hive.shims |
蜂巢0.23 -垫片 |
2.3.9 |
org.apache.hive.shims |
hive-shims-common |
2.3.9 |
org.apache.hive.shims |
hive-shims-scheduler |
2.3.9 |
org.apache.htrace |
htrace-core4 |
4.1.0-incubating |
org.apache.httpcomponents |
httpclient |
4.5.13 |
org.apache.httpcomponents |
httpcore |
4.4.12 |
org.apache.ivy |
艾薇 |
2.5.0 |
org.apache.mesos |
mesos-shaded-protobuf |
1.4.0 |
org.apache.orc |
orc-core |
1.6.12 |
org.apache.orc |
orc-mapreduce |
1.6.12 |
org.apache.orc |
orc-shims |
1.6.12 |
org.apache.parquet |
parquet-column |
1.12.0-databricks-0003 |
org.apache.parquet |
parquet-common |
1.12.0-databricks-0003 |
org.apache.parquet |
parquet-encoding |
1.12.0-databricks-0003 |
org.apache.parquet |
parquet-format-structures |
1.12.0-databricks-0003 |
org.apache.parquet |
parquet-hadoop |
1.12.0-databricks-0003 |
org.apache.parquet |
parquet-jackson |
1.12.0-databricks-0003 |
org.apache.thrift |
libfb303 |
0.9.3 |
org.apache.thrift |
libthrift |
0.12.0 |
org.apache.xbean |
xbean-asm9-shaded |
4.20 |
org.apache.yetus |
audience-annotations |
0.5.0 |
org.apache.zookeeper |
动物园管理员 |
操作 |
org.apache.zookeeper |
zookeeper-jute |
操作 |
org.checkerframework |
checker-qual |
3.5.0 |
org.codehaus.jackson |
jackson-core-asl |
1.9.13 |
org.codehaus.jackson |
jackson-mapper-asl |
1.9.13 |
org.codehaus.janino |
commons-compiler |
3.0.16 |
org.codehaus.janino |
janino |
3.0.16 |
org.datanucleus |
datanucleus-api-jdo |
4.2.4 |
org.datanucleus |
datanucleus-core |
4.1.17 |
org.datanucleus |
datanucleus-rdbms |
4.1.19 |
org.datanucleus |
javax.jdo |
3.2.0-m3 |
org.eclipse.jetty |
jetty-client |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-continuation |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-http |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-io |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-jndi |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-plus |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-proxy |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-security |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty服务器 |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty servlet |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-servlets |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-util |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-util-ajax |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-webapp |
9.4.43.v20210629 |
org.eclipse.jetty |
jetty-xml |
9.4.43.v20210629 |
org.eclipse.jetty.websocket |
websocket-api |
9.4.43.v20210629 |
org.eclipse.jetty.websocket |
websocket-client |
9.4.43.v20210629 |
org.eclipse.jetty.websocket |
websocket-common |
9.4.43.v20210629 |
org.eclipse.jetty.websocket |
websocket服务器 |
9.4.43.v20210629 |
org.eclipse.jetty.websocket |
websocket-servlet |
9.4.43.v20210629 |
org.fusesource.leveldbjni |
leveldbjni-all |
1.8 |
org.glassfish.hk2 |
hk2-api |
2.6.1 |
org.glassfish.hk2 |
hk2-locator |
2.6.1 |
org.glassfish.hk2 |
hk2-utils |
2.6.1 |
org.glassfish.hk2 |
osgi-resource-locator |
1.0.3 |
org.glassfish.hk2.external |
aopalliance-repackaged |
2.6.1 |
org.glassfish.hk2.external |
jakarta.inject |
2.6.1 |
org.glassfish.jaxb |
jaxb运行时 |
2.3.2 |
org.glassfish.jersey.containers |
jersey-container-servlet |
2.34 |
org.glassfish.jersey.containers |
jersey-container-servlet-core |
2.34 |
org.glassfish.jersey.core |
jersey客户端 |
2.34 |
org.glassfish.jersey.core |
jersey-common |
2.34 |
org.glassfish.jersey.core |
jersey-server |
2.34 |
org.glassfish.jersey.inject |
jersey-hk2 |
2.34 |
org.hibernate.validator |
hibernate验证框架 |
6.1.0.Final |
org.javassist |
javassist |
3.25.0-GA |
org.jboss.logging |
jboss-logging |
3.3.2.Final |
org.jdbi |
jdbi |
2.63.1 |
org.jetbrains |
注释 |
17.0.0 |
org.joda |
joda-convert |
1.7 |
org.jodd |
jodd-core |
3.5.2 |
org.json4s |
json4s-ast_2.12 |
3.7.0-M11 |
org.json4s |
json4s-core_2.12 |
3.7.0-M11 |
org.json4s |
json4s-jackson_2.12 |
3.7.0-M11 |
org.json4s |
json4s-scalap_2.12 |
3.7.0-M11 |
org.lz4 |
lz4-java |
1.7.1上 |
org.mariadb.jdbc |
mariadb-java-client |
2.2.5 |
org.objenesis |
objenesis |
2.5.1 |
org.postgresql |
postgresql |
42.2.19 |
org.roaringbitmap |
RoaringBitmap |
0.9.14 |
org.roaringbitmap |
垫片 |
0.9.14 |
org.rocksdb |
rocksdbjni |
6.20.3 |
org.rosuda.REngine |
REngine |
魅惑 |
org.scala-lang |
scala-compiler_2.12 |
2.12.14 |
org.scala-lang |
scala-library_2.12 |
2.12.14 |
org.scala-lang |
scala-reflect_2.12 |
2.12.14 |
org.scala-lang.modules |
scala-collection-compat_2.12 |
2.4.3 |
org.scala-lang.modules |
scala-parser-combinators_2.12 |
1.1.2 |
org.scala-lang.modules |
scala-xml_2.12 |
1.2.0 |
org.scala-sbt |
测试界面 |
1.0 |
org.scalacheck |
scalacheck_2.12 |
1.14.2 |
org.scalactic |
scalactic_2.12 |
3.0.8 |
org.scalanlp |
breeze-macros_2.12 |
1.2 |
org.scalanlp |
breeze_2.12 |
1.2 |
org.scalatest |
scalatest_2.12 |
3.0.8 |
org.slf4j |
jcl-over-slf4j |
1.7.30 |
org.slf4j |
jul-to-slf4j |
1.7.30 |
org.slf4j |
slf4j-api |
1.7.30 |
org.slf4j |
slf4j-log4j12 |
1.7.30 |
org.spark-project.spark |
未使用的 |
1.0.0 |
org.springframework |
spring核心 |
4.1.4.RELEASE |
org.springframework |
spring测试 |
4.1.4.RELEASE |
org.threeten |
threeten-extra |
1.5.0 |
org.tukaani |
xz |
1.8 |
org.typelevel |
algebra_2.12 |
2.0.1 |
org.typelevel |
cats-kernel_2.12 |
2.1.1 |
org.typelevel |
macro-compat_2.12 |
1.1.1 |
org.typelevel |
spire-macros_2.12 |
0.17.0 |
org.typelevel |
spire-bob体育客户端下载platform_2.12 |
0.17.0 |
org.typelevel |
spire-util_2.12 |
0.17.0 |
org.typelevel |
spire_2.12 |
0.17.0 |
org.wildfly.openssl |
wildfly-openssl |
1.0.7.Final |
org.xerial |
sqlite-jdbc |
3.8.11.2 |
org.xerial.snappy |
snappy-java |
1.1.8.4 |
org.yaml |
snakeyaml |
1.24 |
奥罗 |
奥罗 |
2.0.8 |
pl.edu.icm |
JLargeArrays |
1.5 |
software.amazon.ion |
ion-java |
1.0.2中 |
stax |
stax-api |
1.0.1 |