砖运行时的9.0(不支持)
以下版本注释提供信息数据砖运行9.0和9.0砖运行时的光子,由Apache 3.1.2火花。2021年8月砖发布这些图片。光子是在公共预览。
请注意
这些版本注释可能包括引用功能不可用这个版本的谷歌云。
新特性和改进
新的API的汇总统计数据集(公共预览版)
新dbutils.data.summarize命令在砖实用工具允许您启动一个火花工作,自动计算汇总统计的列火花DataFrame交互式地,然后显示结果。这个函数可以在Scala和Python。看到数据效用(dbutils.data)。
简单的外部数据源配置Azure突触连接器
新externalDataSource选项在Azure突触分析查询数据连接器允许您使用一个预定义的外部数据源读取从Azure突触数据库。的externalDataSource选择删除的需要控制之前许可要求。
当设置externalDataSource、外部数据源和tempDir选项用于配置临时存储必须引用相同的容器中存储账户。
选择限制会话指定持续时间为亚马逊红移连接器
新fs.s3a.assumed.role.session.duration选项查询亚马逊使用砖红移连接器允许您选择设置会话持续时间当访问临时S3 bucket的红移是一个假定的角色。
自动加载程序
优化文件清单
自动加载程序优化提供性能改进和成本节约当嵌套在云存储目录清单,包括AWS S3, Azure数据存储Gen2湖(ADLS Gen2)和谷歌云存储(GCS)。
例如,如果你有文件被上传/一些/道路/ / MM / DD / YYYY HH /文件名找到这些目录中的所有文件,自动加载程序用来做一个平行的清单的所有子目录中,造成365(每天)* 24(每小时)= 8760目录列表API调用底层存储为每个目录。通过接收一个扁平的回应这些存储系统,自动加载程序减少了API调用的数量存储系统中的文件的数量除以每个API调用返回的结果的数量(ADLS Gen2 1000 S3, 5000,和1024年gc),大大降低您的云成本。
优化的图像数据存储
自动加载程序现在可以自动检测所摄取图像数据和优化其存储在三角洲表来提高读写性能。看到摄取图像或二进制数据为毫升三角洲湖。
图片缩略图的二进制文件(公共预览版)
图片binaryFile使用自动加载程序格式加载或保存为三角洲表有附加的注释,这样图像缩略图显示表时出现在砖笔记本。有关更多信息,请参见图片。
DirectoryRename事件使原子处理多个文件
自动加载程序流中创建数据砖在Azure上运行时9.0及以上数据存储Gen2设置文件湖事件通知包括目录重命名和听RenameDirectory事件。你可以使用目录重命名多个文件出现自动自动加载程序。
SQL
排除列选择*(公共预览版)
选择*现在支持一个除了指定关键字,你可以排除顶级列的扩张。例如,选择*除了(b)从资源描述从一个表模式(一个b,c)扩大到(一个c)。
SQL标量函数(公共预览版)
创建函数现在支持SQL标量函数。您可以创建标量函数,用一组参数和返回单个标量类型值。SQL函数体可以是任何表达式。例如:
创建函数广场(x双)返回双返回x*x;选择广场(2);
有关详细信息,请参见创建函数(SQL和Python)。
参考前面的别名和列从子查询(公共预览版)
子查询的从子句的查询之前现在可以横向关键字允许他们引用别名和列在前面从物品。例如:
选择*从t1,横向(选择*从t2在哪里t1。c1=t2。c1)
的横向关键词支持内心的,交叉,左(外部)加入。
R的支持
Notebook-scoped R库(公共预览版)
Notebook-scoped库允许您安装库和创建一个环境笔记本会话作用域。这些库不影响其他笔记本上运行相同的集群。可用的库是司机和工人节点,所以你可以在用户定义函数中引用它们。看到Notebook-scoped R库。
在R笔记本警告消息
默认值的警告选择是现在R笔记本内部设置为1。因此,现在所有的警告都是公开为命令结果的一部分。学习更BOB低频彩多有关警告选项,看到选项设置。
避免重做通过指定初始状态进行结构化流状态处理
现在,您可以指定一个用户定义的初始状态为结构化流状态处理使用(平)MapGroupsWithState操作符。
三角洲的low-shuffle实现合并成命令现在可以(公共预览版)
δ合并成可用命令有一个新的实现减少洗牌的修改的行。这个命令的性能得到了很大的提高和帮助保护现有的集群在桌子上,如z值。使低洗牌合并,集spark.databricks.delta.merge.enableLowShuffle来真正的。看到低洗牌合并砖。
库升级
升级的Python库:
certifi 2021.5.30 2020.12.5
chardet 3.0.4 4.0.0
Cython 0.29.21 0.29.23
decorator 10/24/11 5.0.6
ipython 7.19.0 7.22.0
joblib 0.17.0 1.0.1
jupyter-client 6.1.7 6.1.12
jupyter-core 4.6.3 4.7.1
1.3.1 1.3.0 kiwisolver从版本
matplotlib 3.2.2 3.4.2
熊猫从1.1.5 1.2.4
皮普从20.2.4 21.0.1
prompt-toolkit 3.0.8 3.0.17
protobuf 3.17.3 3.17.2
ptyprocess 0.6.0 0.7.0
pyarrow 1.0.1 4.0.0
Pygments 2.7.2 2.8.1发布
pyzmq 19.0.2 20.0.0
从2.24.0 2.25.1请求
s3transfer 0.3.6 0.3.7
scikit-learn 0.23.2 0.24.1
scipy 1.5.2 1.6.2
seaborn 0.10.0 0.11.1
setuptools 50.3.1 52.0.0
statsmodels 0.12.0 0.12.2
龙卷风从6.0.4到6.1
virtualenv 20.2.1 20.4.1
轮0.35.1 0.36.2
升级R库:
矩阵从1.3 3到1.3 - 4
Apache火花
砖9.0运行时包含Apache 3.1.2火花。这个版本包括所有火花修复和改进中砖运行时的8.4(不支持)以及以下额外的bug修复和改进了火花:
(火花- 35886)[SQL] [3.1] PromotePrecision不应覆盖genCodePromotePrecision不应覆盖genCode
(火花- 35879)(核心)(SHUFFLE)修复性能回归collectFetchRequests所致
(火花- 35817)[SQL][3.1]恢复对宽Avro表查询的性能
(火花- 35841)[SQL]铸造字符串十进制类型不起作用,如果…
(火花- 35783)[SQL]设置读取列在任务配置的列表来减少兽人的阅读数据
(火花- 35576)[SQL][3.1]编辑中的敏感信息设置命令的结果
(火花- 35449)[SQL][3.1]只有从CaseWhen提取常见的表情如果elseValue设置值
(火花- 35288)[SQL] StaticInvoke应该找到方法没有具体参数类比赛
(火花- 34794)[SQL]修复λDataFrame嵌套函数的变量名称问题
(火花- 35278)[SQL]调用应该找到正确的方法参数的数量
(火花- 35226)[SQL]支持refreshKrb5Config选择JDBC数据源
(火花- 35244)[SQL]调用应该把原始异常
(火花- 35213)[SQL]保持正确的订购链接withField嵌套结构的操作
(火花- 35087)(UI)一些列在表聚合度量的遗嘱执行人stage-detail页面显示不正确。
(火花- 35168)[SQL] mapred.reduce。任务应该洗牌。分区不adaptive.coalescePartitions.initialPartitionNum
(火花- 35127)(UI)当我们之间切换不同stage-detail页面,输入项新建的页面可能是空白的
(火花- 35142)(PYTHON) (ML)修复错误的返回类型
rawPredictionUDF在OneVsRestModel(火花- 35096)[SQL] SchemaPruning应该坚持spark.sql。caseSensitive配置
(火花- 34639)[SQL] [3.1] RelationalGroupedDataset。别名不应该创建UnresolvedAlias
(火花- 35080)[SQL]只允许等式谓词的一个子集相关子查询时聚合
(火花- 35117)(UI)改变进度条突出任务进展的比率
(火花- 35136)删除初始LiveStage.info null值
(火花- 34834)[网络]修复TransportResponseHandler潜在网状的内存泄漏
(火花- 35045)[SQL]添加一个内部选项控制在univocity输入缓冲区
(火花- 35014)修复PhysicalAggregation模式不重写可折叠的表达式
(火花- 35019)(PYTHON] [SQL]修复pyspark.sql提示类型不匹配。*
(火花- 34926)[SQL] [3.1] PartitioningUtils.getPathFragment()应该尊重分区值是null
(火花- 34630)(PYTHON)为pyspark添加typehint。版本
(火花- 34963)[SQL]解决嵌套列中提取不区分大小写的修剪结构体字段从结构体的数组
(火花- 34988)[心][3.1]升级Jetty cve - 2021 - 28165
(火花- 34922)[SQL][3.1]在国会预算办公室使用相对成本比较函数
(火花- 34970)[SQL][安全][3.1]编辑映射类型选项解释()的输出
(火花- 34923)[SQL]元数据输出更多的计划应该是空的
(火花- 34949)(核心)防止BlockManager再定位,当执行器是关闭的
(火花- 34939)(核心)抛出获取故障异常时无法播放状态映射进行反序列化
(火花- 34909)[SQL]修复conv消极转换成无符号()
(火花- 34845)(核心)ProcfsMetricsGetter不能返回局部procfs指标
(火花- 34814)[SQL] LikeSimplification应该处理NULL
(火花- 34876)[SQL]填补defaultResult非空集合
(火花- 34829)[SQL]解决高阶函数的结果
(火花- 34840)(SHUFFLE)修复病例合并洗牌的腐败…
(火花- 34833)[SQL] right-padding正确申请相关子查询
(火花- 34630)(PYTHON] [SQL]添加typehint pyspark.sql.Column.contains
(火花- 34763)[SQL]坳(),美元“<名称>”和df(“名字”)应当妥善处理引用列名
(火花- 33482)(火花- 34756)[SQL]修复FileScan平等检查
(火花- 34790)(核心)禁用抓取洗牌块在批io启用加密
(火花- 34803)(PYSPARK)通过提高ImportError如果熊猫或pyarrow不能导入
(火花- 34225)(核心)不编码进一步当一个URI字符串传递给addFile或addJar形式
(火花- 34811)(核心)修订fs.s3a.access。关键的秘密和令牌
(火花- 34796)[SQL][3.1]初始化计数器变量的限制代码生成doProduce ()
(火花- 34128)[SQL]抑制不良TTransportException警告参与节俭- 4805
(火花- 34776)[SQL]嵌套列修剪不应该删除窗口属性
(火花- 34087)[3.1][SQL] ExecutionListenerBus解决内存泄漏
(火花- 34772)[SQL] RebaseDateTime loadRebaseRecords应该使用火花代替上下文类加载器
(火花- 34719)[SQL][3.1]正确解决视图查询与重复的列名
(火花- 34766)[SQL][3.1]不捕捉maven配置视图
(火花- 34731)(核心)避免在EventLoggingListener ConcurrentModificationException修订属性时
(火花- 34737)[SQL][3.1]输入浮翻倍
TIMESTAMP_SECONDS(火花- 34749)[SQL][3.1]简化ResolveCreateNamedStruct
(火花- 34768)[SQL]尊重Univocity中的默认输入缓冲区的大小
(火花- 34770)[SQL] InMemoryCatalog。如果数据库不存在tableExists不应该失败
(火花- 34504)[SQL]避免不必要的解决SQL DDL命令临时视图
(火花- 34727)[SQL]解决差异在铸造浮动时间戳
(火花- 34723)[SQL]正确的参数类型下的子表达式消除舞台
(火花- 34724)[SQL]修复使用getMethod代替getDeclaredMethod解释评价
(火花- 34713)集团通过与ExtractValue CreateStruct [SQL]修复
(火花- 34697)[SQL]允许描述功能和显示功能解释关于| |(字符串连接操作符)
(火花- 34682)[SQL]用PrivateMethodTester代替反射
(火花- 34682)[SQL]修复回归在CustomShuffleReaderExec规范化错误检查
(火花- 34681)[SQL]修复bug,完全外洗好的散列连接在构建左侧不相等的条件
(火花- 34545)[SQL]修复问题valueCompare地幔岩的特征
(火花- 34607)[SQL] [3.1]
Utils.isMemberClass修复一个畸形jdk8u类名称错误(火花- 34596)[SQL]使用跑龙套。在NewInstance.doGenCode getSimpleName避免触及畸形类的名字
(火花- 34613)[SQL]修复视图不捕捉禁用提示配置
(火花- 32924)[WEBUI]使时间列在主UI以正确的顺序进行排序
(火花- 34482)[SS]正确积极SparkSession StreamExecution.logicalPlan
(火花- 34567)[SQL] CreateTableAsSelect也应该更新指标
(火花- 34599)[SQL]修复问题,插入覆盖不支持分区列包含DSv2点
(火花- 34577)[SQL]修复/添加列的数据集
描述名称空间(火花- 34584)[SQL]静态分区也应该遵循StoreAssignmentPolicy当插入v2表
(火花- 34555)从DataFrame [SQL]解决元数据输出
(火花- 34534)当使用FetchShuffleBlocks获取块修复blockIds秩序
(火花- 34547)[SQL]只使用元数据列决议作为最后的手段
(火花- 34417)[SQL] org.apache.spark.sql.DataFrameNaFunctions。fillMap未列名有一个点
(火花- 34561)[SQL]修复下降/添加列/ v2的数据集
描述表(火花- 34556)[SQL]检查重复的静态分区列应该尊重区分大小写的相依
(火花- 34392)[SQL]支持ZoneOffset + h: DateTimeUtils毫米。getZoneId
(火花- 34550)[SQL]跳过插图在推动过滤器蜂巢metastore null值
(火花- 34543)[SQL]尊重
spark.sql.caseSensitive配置解决分区规范在v1集位置(火花- 34436)[SQL]民进党支持像任何/所有的表情
(火花- 34531)(核心)删除实验API PrometheusServlet标签
(火花- 34497)[SQL]修复内置JDBC连接供应商恢复JVM安全上下文的变化
(火花- 34515)[SQL]修复肺水肿getPartitionsByFilter期间如果插图包含空值
(火花- 34490)[SQL]分析应该会失败如果视图引用一个表
(火花- 34473)[SQL]避免DataFrameReader.schema肺水肿(StructType)
(火花- 34384)(核心)为ResourceProfile api添加缺失的文档
(火花- 34373)[SQL] HiveThriftServer2 startWithContext可能挂的种族问题
(火花- 20977)(核心)使用一个不是final字段CollectionAccumulator的状态
(火花- 34421)[SQL]解决临时与ct在视图和视图的作用
(火花- 34431)(核心)只有负载
hive-site.xml一次(火花- 34405)(核心)修复平均值的timersLabels PrometheusServlet类
(火花- 33438)[SQL]急切地初始化对象定义SQL相依之命令
集- v(火花- 34158)在pom . xml中不正确的url唯一开发者马泰
(火花- 34346)(核心)[SQL] [3.1] io.file.buffer。spark.buffer设定的大小。将会覆盖通过加载hive-site大小。xml accidentally may cause perf regression
(火花- 34359)[SQL][3.1]添加一个遗产展示数据库的配置恢复输出模式
(火花- 34331)[SQL]加快DS v2坳决议的元数据
(火花- 34318)数据集[SQL] [3.1]。colRegex应与列名和限定符包含换行
(火花- 34326)(核心)[SQL]解决生产中添加火花- 31793根据临时路径的长度
(火花- 34319)[SQL] FlatMapCoGroupsInPandas / MapInPandas解决重复的属性
(火花- 34310)(核心)[SQL]取代地图和flatMap平
(火花- 34083)[SQL][3.1]使用char、varchar tpcd原始定义科勒姆
(火花- 34233)[SQL][3.1]的字符填充修复肺水肿二进制比较
(火花- 34270)[SS]结合StateStoreMetrics不应该覆盖StateStoreCustomMetric
(火花- 34144)[SQL]试图写LocalDate时抛出异常和即时JDBC关系值
(火花- 34273)(核心)不要再对准BlockManager SparkContext时停止
(火花- 34262)[SQL] [3.1] v1的刷新缓存的数据表
改变表. .集位置(火花- 34275)[心][SQL] [MLLIB]替换过滤器和大小
(火花- 34260)[SQL]修复UnresolvedException创建临时视图时两次
(火花- 33867)[SQL]即时和LocalDate值生成SQL查询时不处理
(火花- 34193)(核心)TorrentBroadcast块经理解决退役竞赛
(火花- 34221)(WEBUI)确保UI页面中如果一个阶段失败,可以正确显示相应的错误消息
(火花- 34236)[SQL]修复v2覆盖w /零静态分区提出不能翻译表达源过滤器:null
(火花- 34212)[SQL]修复错误的十进制阅读从铺文件
(火花- 34244)[SQL]删除regexp_extract_all的Scala函数版本
(火花- 34235)[SS] spark.sql。蜂巢作为私人包
(火花- 34232)(核心)修订SparkListenerEnvironmentUpdate事件日志
(火花- 34229)[SQL] Avro应该阅读十进制值的文件模式
(火花- 34223)[SQL]为静态分区修复肺水肿InsertIntoHadoopFsRelationCommand null
(火花- 34192)[SQL]移动字符填充写一边读一边和删除长度检查
(火花- 34203)[SQL]转换
零分区的值__HIVE_DEFAULT_PARTITION__在v1内存中目录(火花- 33726)[SQL]聚合期间解决重复的字段名称
(火花- 34133)[AVRO]尊重大小写敏感性在执行Catalyst-to-Avro字段匹配
(火花- 34187)[SS]使用可用的补偿范围获得投票期间检查抵消验证
(火花- 34052)[SQL][3.1]商店创建一个临时视图使用SQL文本“缓存表. .当选择…”
(火花- 34213)[SQL] v1的刷新缓存的数据表
负载数据(火花- 34191)(PYTHON] [SQL]为udf添加输入过载
(火花- 34200)[SQL]模糊列引用应该考虑属性的可用性
(火花- 33813)[SQL][3.1]修复问题,JDBC数据源不能治疗MS SQL服务器的空间类型
(火花- 34178)[SQL]新节点由MultiInstanceRelation.newInstance复制标签
(火花- 34005)[心][3.1]更新峰值内存指标对于每个执行者在任务结束
(火花- 34115)(核心)检查SPARK_TESTING懒惰的val避免减速
(火花- 34153)[SQL][3.1][3.0]删除未使用的
getRawTable ()从HiveExternalCatalog.alterPartitions ()(火花- 34130)为char [SQL]提高preformace varchar填充和长度与StaticInvoke检查
(火花- 34027)[SQL][3.1]刷新缓存
改变表. .恢复分区(火花- 34151)[SQL]替换
java.io.File.toURL与java.io.File.toURI.toURL(火花- 34140)[SQL] [3.1] QueryCompilationErrors移动。scala org/apache/spark/sql/errors
(火花- 34080)(毫升)(PYTHON)添加UnivariateFeatureSelector
(火花- 33790)[心][3.1]SingleFileEventLogFileReader减少getFileStatus的rpc调用
(火花- 34118)[心][SQL][3.1]替换过滤器,检查空虚的存在或原则
(火花- 34114)[SQL]不应该削减对读字符长度检查和填充
(火花- 34086)[SQL][3.1]由于RaiseError生成太多代码,可能失败codegen长度检查字符varchar
(火花- 34075)[SQL](核心)隐藏目录被列为分区推断
(火花- 34076)[SQL] SQLContext。dropTempTable失败是否非空的缓存
(火花- 34084)[SQL][3.1]修复汽车更新表的统计数据
改变表. .添加分区(火花- 34090)缓存HadoopDelegationTokenManager [SS]。isServiceEnabled KafkaTokenUtil.needTokenUpdate中使用的结果
(火花- 34069)(核心)任务应该尊重SPARK_JOB_INTERRUPT_ON_CANCEL杀死障碍
(火花- 34091)[SQL]洗牌批取回后应该可以禁用它被启用
(火花- 34059)[SQL][核心][3.1]使用/ foreach而不是映射确保急切地执行它
(火花- 34002)[SQL] ScalaUDF修复使用的编码器
(火花- 34060)[SQL][3.1]修复蜂巢表缓存而更新统计数据
改变表. .下降分区(火花- 31952)[SQL]修复错误的内存泄漏指标时聚合
(火花- 33591)[SQL][3.1]识别
零在分区规范值(火花- 34055)[SQL][3.1]刷新缓存
改变表. .添加分区(火花- 34039)[SQL] [3.1] ReplaceTable应该缓存失效
(火花- 34003)[SQL]修正规则PaddingAndLengthCheckForCharVarchar和ResolveAggregateFunctions之间的冲突
(火花- 33938)[SQL] [3.1] LikeSimplification优化和任何/所有
(火花- 34021)[R]为凹口提交修复SparkR超链接文档
(火花- 34011)[SQL][3.1][3.0]刷新缓存
改变表. .重命名来分区(火花- 33948)[SQL]修复CodeGen MapObjects误差。在Scala 2.13 doGenCode方法
(火花- 33635)[SS] KafkaTokenUtil调整的顺序检查。needTokenUpdate补救性能回归
(火花- 33029)(核心)[WEBUI]解决UI执行人页面错误标志着司机排除在外
(火花- 34015)[R]修正输入时间在新闻出版总署
(火花- 34012)[SQL]相依之时保持一致的行为
spark.sql.legacy.parser.havingWithoutGroupByAsWhere和迁移指南是真的吗(火花- 33844)[SQL] [3.1] InsertIntoHiveDir命令应该检查坳名称
(火花- 33935)[SQL]修复CBO成本函数
(火花- 33100)[SQL]忽视spark-sql分号括号内的评论
(火花- 34000)(核心)修复stageAttemptToNumSpeculativeTasks java.util.NoSuchElementException
(火花- 33992)[SQL]覆盖transformUpWithNewOutput添加allowInvokingTransformsInAnalyzer
(火花- 33894)[SQL]改变mllib私人case类的可见性,以避免与Scala 2.13运行时编译错误
(火花- 33950)[SQL][3.1][3.0]在v1刷新缓存
改变表. .下降分区(火花- 33980)[SS]无效spark.readStream.schema char、varchar
(火花- 33945)[SQL][3.1]处理随机种子expr树组成
(火花- 33398)火花3.0之前修复加载树模型
(火花- 33963)[SQL]规范化
HiveTableRelationw / o表统计(火花- 33906)[WEBUI]修复bug的UI执行人页面由于定义peakMemoryMetrics卡住了
(火花- 33944)[SQL]错误日志的仓库钥匙SharedState选项
(火花- 33936)[SQL][3.1]添加版本当连接器的接口被添加
(火花- 33916)(核心)解决后备存储抵消,提高压缩编解码器的测试覆盖率
(火花- 33899)[SQL][3.1]修复断言失败在v1显示表/视图
spark_catalog(火花- 33901)[SQL]修复Char、Varchar ddl后显示出错
(火花- 33897)[SQL]不能设置选项“十字架”连接方法
(火花- 33907)[SQL][3.1]只删除列JsonToStructs如果解析选项是空的
(火花- 33621)(火花- 33784)[SQL][3.1]添加一个方法注入数据源重写规则
(火花- 33900)[WEBUI]显示洗牌正确读取大小/记录只有remotebytesread可用
(火花- 33892)[SQL]显示char、varchar DESC并显示创建表
(火花- 33895)[SQL] Char、Varchar MetaOperation ThriftServer的失败
(火花- 33659)[SS]文档目前DataStreamWriter的行为。toTable API
(火花- 33893)(核心)排除后备阻止经理executorList
(火花- 33277)[PYSPARK] [SQL]使用ContextAwareIterator任务结束后停止消费
(火花- 33889)[SQL][3.1]修复肺水肿
显示分区V2表上(火花- 33879)[SQL] Char Varchar值失败w /匹配误差作为分区列
(火花- 33877)[SQL] SQL参考文档插入w /列清单
(火花- 33876)[SQL]添加长度检查阅读char、varchar从表w /外部位置
(火花- 33846)[SQL]包括StructType.toDDL评论一个嵌套模式
(火花- 33860)[SQL] CatalystTypeConverters。convertToCatalyst匹配特殊的数组值
(火花- 33834)[SQL]验证ALTER TABLE变化与Char、Varchar列
(火花- 33853)[SQL]解释CODEGEN和BenchmarkQueryTest不显示子查询的代码
(火花- 33836)[SS] [PYTHON)暴露DataStreamReader。表和DataStreamWriter.toTable
(火花- 33829)[SQL][3.1]重命名v2表应该重新创建缓存
(火花- 33756)[SQL]使BytesToBytesMap MapIterator幂等
(火花- 33850)[SQL]解释格式化没有显示的计划如果启用AQE子查询
(火花- 33841)[心][3.1]解决就业问题从高负载下的合成起就断断续续的消失
(火花- 33593)[SQL]与二进制向量读者有不正确的数据分区的值
(火花- 26341)(WEBUI)公开遗嘱执行人内存指标在舞台上层面,在阶段选项卡中
(火花- 33831)jetty 9.4.34 (UI)更新
(火花- 33822)[SQL]使用
CastSupport.cast方法在HashJoin(火花- 33774)(UI)(核心)回到主人”返回500错误在独立的集群中
(火花- 26199)(火花- 31517)[R]修复策略处理…名称变异
(火花- 33819)[心][3.1]SingleFileEventLogFileReader / RollingEventLogFilesFileReader应该
包私人(火花- 33697)[SQL] RemoveRedundantProjects应该要求列默认排序
(火花- 33752)[SQL][3.1]避免getSimpleMessage AnalysisException反复加分号
(火花- 33788)[SQL][3.1][3.0][2.4]扔NoSuchPartitionsException从HiveExternalCatalog.dropPartitions ()
(火花- 33803)[SQL]排序表的关键属性描述表命令
(火花- 33786)[SQL]存储水平缓存表名称改变时应该得到尊重
(火花- 33273)[SQL]解决竞态条件的子查询的执行
(火花- 33653)[SQL] [3.1] DSv2:刷新表应该recache表本身
(火花- 33777)[SQL] V2的排序输出显示分区
(火花- 33733)[SQL] PullOutNondeterministic应该检查并收集确定的领域
(火花- 33764)[SS]使国家商店维修间隔期SQL配置
(火花- 33729)[SQL]缓存刷新时,火花recaching数据时不应该使用缓存的计划
(火花- 33742)[SQL][3.1]扔PartitionsAlreadyExistException从HiveExternalCatalog.createPartitions ()
(火花- 33706)[SQL]需要完全指定的分区标识符partitionExists ()
(火花- 33740)[SQL] hadoop hive-site配置。xml can overrides pre-existing hadoop ones
(火花- 33692)[SQL]视图应该使用捕获的目录和命名空间查询功能
(火花- 33669)错误的错误消息从纱纱sc.stop时应用程序状态监视客户机模式
(火花- 32110)[SQL]正常化特殊漂浮在HyperLogLog + +数字
(火花- 33677)[SQL]如果模式包含任何escapeChar跳过LikeSimplification规则
(火花- 33693)[SQL]轻视spark.sql.hive.convertCTAS
(火花- 33641)[SQL]无效新char、varchar类型公共api,产生不正确的结果
(火花- 32680)[SQL]不预处理V2 cta与未解决的查询
(火花- 33676)[SQL]需要精确匹配的分区模式的规范V2
改变表. .添加/删除分区(火花- 33670)[SQL]验证分区提供者蜂巢v1显示表中扩展
(火花- 33663)[SQL] Uncaching不应该呼吁不存在临时视图
(火花- 33667)[SQL]尊重
spark.sql.caseSensitive配置解决分区规范在v1显示分区(火花- 33652)[SQL] DSv2: DeleteFrom应该刷新缓存
维护更新
看到砖9.0运行时的维护更新。
系统环境
操作系统:Ubuntu 20.04.2 LTS
Java:祖鲁8.54.0.21-CA-linux64
Scala:2.12.10
Python:3.8.10
R:4.1.0 (2021-05-18)
三角洲湖1.0.0
安装Python库
图书馆 |
版本 |
图书馆 |
版本 |
图书馆 |
版本 |
|---|---|---|---|---|---|
Antergos Linux |
2015.10 (ISO-Rolling) |
appdirs |
1.4.4 |
backcall |
0.2.0 |
boto3 |
1.16.7 |
botocore |
1.19.7 |
certifi |
2020.12.5 |
chardet |
4.0.0 |
周期计 |
0.10.0 |
Cython |
0.29.23 |
dbus-python |
1.2.16 |
装饰 |
5.0.6 |
distlib |
0.3.2 |
distro-info |
0.23 ubuntu1 |
facets-overview |
1.0.0 |
filelock |
3.0.12 |
idna |
2.10 |
ipykernel |
5.3.4 |
ipython |
7.22.0 |
ipython-genutils |
0.2.0 |
绝地武士 |
0.17.2 |
jmespath |
0.10.0 |
joblib |
1.0.1 |
jupyter-client |
6.1.12 |
jupyter-core |
4.7.1 |
kiwisolver |
1.3.1 |
考拉 |
1.8.1 |
matplotlib |
3.4.2 |
numpy |
1.19.2 |
熊猫 |
1.2.4 |
parso |
0.7.0 |
容易受骗的人 |
0.5.1 |
pexpect |
4.8.0 |
pickleshare |
0.7.5 |
枕头 |
8.2.0 |
皮普 |
21.0.1 |
情节 |
4.14.3 |
prompt-toolkit |
3.0.17 |
protobuf |
3.17.2 |
psycopg2 |
2.8.5 |
ptyprocess |
0.7.0 |
pyarrow |
4.0.0 |
Pygments |
2.8.1发布 |
PyGObject |
3.36.0 |
pyparsing |
2.4.7 |
python-apt |
2.0.0 + ubuntu0.20.4.5 |
python-dateutil |
2.8.1发布 |
pytz |
2020.5 |
pyzmq |
20.0.0 |
请求 |
2.25.1 |
requests-unixsocket |
0.2.0 |
重试 |
1.3.3 |
s3transfer |
0.3.7 |
scikit-learn |
0.24.1 |
scipy |
1.6.2 |
seaborn |
0.11.1 |
setuptools |
52.0.0 |
六个 |
1.15.0 |
ssh-import-id |
5.10 |
statsmodels |
0.12.2 |
threadpoolctl |
魅惑 |
龙卷风 |
6.1 |
traitlets |
5.0.5 |
unattended-upgrades |
0.1 |
urllib3 |
1.25.11 |
virtualenv |
20.4.1 |
wcwidth |
0.2.5 |
轮 |
0.36.2 |
安装R库
R库的安装微软在2021-07-28凹口快照。
图书馆 |
版本 |
图书馆 |
版本 |
图书馆 |
版本 |
|---|---|---|---|---|---|
askpass |
1.1 |
为了 |
0.2.1 |
补丁 |
1.2.1 " |
基地 |
4.1.0 |
base64enc |
0.1 - 3 |
黑洞 |
1.72.0-3 |
位 |
4.0.4 |
bit64 |
你 |
团 |
1.2.1 " |
引导 |
-28 - 1.3 |
酿造 |
1.0 6 |
生动 |
1.1.0 |
扫帚 |
0.7.2 |
callr |
3.5.1 |
脱字符号 |
-86 - 6.0 |
cellranger |
1.1.0 |
时间 |
-56 - 2.3 |
类 |
-19 - 7.3 |
cli |
2.2.0 |
clipr |
是0.7.1 |
集群 |
2.1.2 |
codetools |
-18 - 0.2 |
色彩 |
2.0 0 |
commonmark |
1.7 |
编译器 |
4.1.0 |
配置 |
0.3 |
covr |
3.5.1 |
cpp11 |
0.2.4 |
蜡笔 |
1.3.4 |
凭证 |
1.3.0 |
相声 |
1.1.0.1 |
旋度 |
4.3 |
data.table |
1.13.4 |
数据集 |
4.1.0 |
DBI |
1.1.0 |
dbplyr |
2.0.0 |
desc |
1.2.0 |
devtools |
2.3.2 |
diffobj |
0.3.2 |
消化 |
0.6.27 |
dplyr |
1.0.2中 |
DT |
0.16 |
省略 |
0.3.1 |
评估 |
0.14 |
fansi |
0.4.1 |
farver |
2.0.3 |
fastmap |
1.0.1 |
forcats |
0.5.0 |
foreach |
1.5.1 |
外国 |
-81 - 0.8 |
打造 |
0.2.0 |
fs |
1.5.0 |
未来 |
1.21.0 |
泛型 |
0.1.0 |
哥特 |
1.0.2中 |
ggplot2 |
3.3.2 |
“大酒店” |
1.2.0 |
gitcreds |
0.1.1 |
glmnet |
4.0 - 2 |
全局变量 |
0.14.0 |
胶水 |
1.4.2 |
高尔 |
0.2.2 |
图形 |
4.1.0 |
grDevices |
4.1.0 |
网格 |
4.1.0 |
gridExtra |
2.3 |
gsubfn |
0.7 |
gtable |
0.3.0 |
还 |
2.3.1 |
highr |
0.8 |
hms |
0.5.3 |
htmltools |
0.5.0 |
htmlwidgets |
1.5.3 |
httpuv |
1.5.4 |
httr |
1.4.2 |
hwriter |
1.3.2 |
hwriterPlus |
1.0 - 3 |
ini |
0.3.1 |
不小 |
0.9 9 |
isoband |
0.2.3 |
迭代器 |
1.0.13 |
jsonlite |
1.7.2 |
KernSmooth |
-20 - 2.23 |
knitr |
1.30 |
标签 |
0.4.2 |
晚些时候 |
1.1.0.1 |
晶格 |
-44 - 0.20 |
熔岩 |
1.6.8.1 |
lazyeval |
0.2.2 |
生命周期 |
0.2.0 |
listenv |
0.8.0 |
lubridate |
1.7.9.2 |
magrittr |
2.0.1 |
减价 |
1.1 |
质量 |
-54 - 7.3 |
矩阵 |
1.3 - 4 |
memoise |
1.1.0 |
方法 |
4.1.0 |
mgcv |
-36 - 1.8 |
mime |
0.9 |
ModelMetrics |
1.2.2.2 |
modelr |
0.1.8 |
孟塞尔 |
0.5.0 |
nlme |
-152 - 3.1 |
nnet |
-16 - 7.3 |
numDeriv |
2016.8 - -1.1 |
openssl |
3 |
平行 |
4.1.0 |
平行 |
1.22.0 |
支柱 |
1.4.7 |
pkgbuild |
1.1.0 |
pkgconfig |
2.0.3 |
pkgload |
1.1.0 |
plogr |
0.2.0 |
plyr |
1.8.6 |
赞美 |
1.0.0 |
prettyunits |
1.1.1 |
pROC |
1.16.2 |
processx |
3.4.5 |
prodlim |
2019.11.13 |
进步 |
1.2.2 |
承诺 |
1.1.1 |
原型 |
1.0.0 |
ps |
1.5.0 |
purrr |
0.3.4 |
r2d3 |
0.2.3 |
R6 |
2.5.0 |
randomForest |
-14 - 4.6 |
rappdirs |
0.3.1 |
rcmdcheck |
1.3.3 |
RColorBrewer |
1.1 - 2 |
Rcpp |
1.0.5 |
readr |
1.4.0 |
readxl |
1.3.1 |
食谱 |
0.1.15 |
复赛 |
1.0.1 |
rematch2 |
2.1.2 |
遥控器 |
2.2.0 |
reprex |
0.3.0 |
reshape2 |
1.4.4 |
雷克斯 |
1.2.0 |
rlang |
0.4.9 |
rmarkdown |
2.6 |
RODBC |
-17 - 1.3 |
roxygen2 |
安装7.1.1 |
rpart |
-15 - 4.1 |
rprojroot |
2.0.2 |
Rserve |
1.8 8 |
RSQLite |
2.2.1 |
rstudioapi |
0.13 |
rversions |
2.0.2 |
房车 |
0.3.6 |
尺度 |
1.1.1 |
selectr |
0.4 - 2 |
sessioninfo |
1.1.1 |
形状 |
1.4.5 |
闪亮的 |
1.5.0 |
sourcetools |
0.1.7 |
sparklyr |
1.5.2 |
SparkR |
3.1.1 |
空间 |
-11 - 7.3 |
样条函数 |
4.1.0 |
sqldf |
-11 - 0.4 |
SQUAREM |
2020.5 |
统计数据 |
4.1.0 |
stats4 |
4.1.0 |
stringi |
1.5.3 |
stringr |
1.4.0 |
生存 |
-11 - 3.2 |
sys |
3.4 |
tcltk |
4.1.0 |
TeachingDemos |
2.10 |
testthat |
3.0.0 |
宠物猫 |
3.0.4 |
tidyr |
1.1.2 |
tidyselect |
1.1.0 |
tidyverse |
1.3.0 |
timeDate |
3043.102 |
tinytex |
0.28 |
工具 |
4.1.0 |
usethis |
2.0.0 |
use utf8 |
1.1.4 |
跑龙套 |
4.1.0 |
uuid |
0.1 - 4 |
vctrs |
0.3.5 |
viridisLite |
0.3.0 |
沃尔多 |
0.2.3 |
晶须 |
0.4 |
withr |
tripwire |
xfun |
0.19 |
xml2 |
1.3.2 |
xopen |
1.0.0 |
xtable |
1.8 - 4 |
yaml |
2.2.1 |
邮政编码 |
2.1.1 |
安装了Java和Scala库(Scala 2.12集群版)
组ID |
工件ID |
版本 |
|---|---|---|
antlr |
antlr |
2.7.7 |
com.amazonaws |
amazon-kinesis-client |
1.12.0 |
com.amazonaws |
aws-java-sdk-autoscaling |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudformation |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudfront |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudhsm |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudsearch |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudtrail |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudwatch |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudwatchmetrics |
1.11.655 |
com.amazonaws |
aws-java-sdk-codedeploy |
1.11.655 |
com.amazonaws |
aws-java-sdk-cognitoidentity |
1.11.655 |
com.amazonaws |
aws-java-sdk-cognitosync |
1.11.655 |
com.amazonaws |
aws-java-sdk-config |
1.11.655 |
com.amazonaws |
aws-java-sdk-core |
1.11.655 |
com.amazonaws |
aws-java-sdk-datapipeline |
1.11.655 |
com.amazonaws |
aws-java-sdk-directconnect |
1.11.655 |
com.amazonaws |
aws-java-sdk-directory |
1.11.655 |
com.amazonaws |
aws-java-sdk-dynamodb |
1.11.655 |
com.amazonaws |
aws-java-sdk-ec2 |
1.11.655 |
com.amazonaws |
aws-java-sdk-ecs |
1.11.655 |
com.amazonaws |
aws-java-sdk-efs |
1.11.655 |
com.amazonaws |
aws-java-sdk-elasticache |
1.11.655 |
com.amazonaws |
aws-java-sdk-elasticbeanstalk |
1.11.655 |
com.amazonaws |
aws-java-sdk-elasticloadbalancing |
1.11.655 |
com.amazonaws |
aws-java-sdk-elastictranscoder |
1.11.655 |
com.amazonaws |
aws-java-sdk-emr |
1.11.655 |
com.amazonaws |
aws-java-sdk-glacier |
1.11.655 |
com.amazonaws |
aws-java-sdk-glue |
1.11.655 |
com.amazonaws |
aws-java-sdk-iam |
1.11.655 |
com.amazonaws |
aws-java-sdk-importexport |
1.11.655 |
com.amazonaws |
aws-java-sdk-kinesis |
1.11.655 |
com.amazonaws |
aws-java-sdk-kms |
1.11.655 |
com.amazonaws |
aws-java-sdk-lambda |
1.11.655 |
com.amazonaws |
aws-java-sdk-logs |
1.11.655 |
com.amazonaws |
aws-java-sdk-machinelearning |
1.11.655 |
com.amazonaws |
aws-java-sdk-marketplacecommerceanalytics |
1.11.655 |
com.amazonaws |
aws-java-sdk-marketplacemeteringservice |
1.11.655 |
com.amazonaws |
aws-java-sdk-opsworks |
1.11.655 |
com.amazonaws |
aws-java-sdk-rds |
1.11.655 |
com.amazonaws |
aws-java-sdk-redshift |
1.11.655 |
com.amazonaws |
aws-java-sdk-route53 |
1.11.655 |
com.amazonaws |
aws-java-sdk-s3 |
1.11.655 |
com.amazonaws |
aws-java-sdk-ses |
1.11.655 |
com.amazonaws |
aws-java-sdk-simpledb |
1.11.655 |
com.amazonaws |
aws-java-sdk-simpleworkflow |
1.11.655 |
com.amazonaws |
aws-java-sdk-sns |
1.11.655 |
com.amazonaws |
aws-java-sdk-sqs |
1.11.655 |
com.amazonaws |
aws-java-sdk-ssm |
1.11.655 |
com.amazonaws |
aws-java-sdk-storagegateway |
1.11.655 |
com.amazonaws |
aws-java-sdk-sts |
1.11.655 |
com.amazonaws |
aws-java-sdk-support |
1.11.655 |
com.amazonaws |
aws-java-sdk-swf-libraries |
1.11.22 |
com.amazonaws |
aws-java-sdk-workspaces |
1.11.655 |
com.amazonaws |
jmespath-java |
1.11.655 |
com.chuusai |
shapeless_2.12 |
2.3.3 |
com.clearspring.analytics |
流 |
2.9.6 |
com.databricks |
Rserve |
1.8 - 3 |
com.databricks |
jets3t |
0.7.1-0 |
com.databricks.scalapb |
compilerplugin_2.12 |
0.4.15-10 |
com.databricks.scalapb |
scalapb-runtime_2.12 |
0.4.15-10 |
com.esotericsoftware |
kryo-shaded |
4.0.2 |
com.esotericsoftware |
minlog |
1.3.0 |
com.fasterxml |
同学 |
1.3.4 |
com.fasterxml.jackson.core |
jackson-annotations |
2.10.0 |
com.fasterxml.jackson.core |
jackson-core |
2.10.0 |
com.fasterxml.jackson.core |
jackson-databind |
2.10.0 |
com.fasterxml.jackson.dataformat |
jackson-dataformat-cbor |
2.10.0 |
com.fasterxml.jackson.datatype |
jackson-datatype-joda |
2.10.0 |
com.fasterxml.jackson.module |
jackson-module-paranamer |
2.10.0 |
com.fasterxml.jackson.module |
jackson-module-scala_2.12 |
2.10.0 |
com.github.ben-manes.caffeine |
咖啡因 |
2.3.4 |
com.github.fommil |
jniloader |
1.1 |
com.github.fommil.netlib |
核心 |
1.1.2 |
com.github.fommil.netlib |
native_ref-java |
1.1 |
com.github.fommil.netlib |
native_ref-java-natives |
1.1 |
com.github.fommil.netlib |
native_system-java |
1.1 |
com.github.fommil.netlib |
native_system-java-natives |
1.1 |
com.github.fommil.netlib |
netlib-native_ref-linux-x86_64-natives |
1.1 |
com.github.fommil.netlib |
netlib-native_system-linux-x86_64-natives |
1.1 |
com.github.joshelser |
dropwizard-metrics-hadoop-metrics2-reporter |
0.1.2 |
com.github.luben |
zstd-jni |
1.4.8-1 |
com.github.wendykierp |
JTransforms |
3.1 |
com.google.code.findbugs |
jsr305 |
3.0.0 |
com.google.code.gson |
gson |
2.2.4 |
com.google.flatbuffers |
flatbuffers-java |
1.9.0 |
com.google.guava |
番石榴 |
15.0 |
com.google.protobuf |
protobuf-java |
2.6.1 |
com.h2database |
h2 |
1.4.195 |
com.helger |
分析器 |
1.1.1 |
com.jcraft |
jsch |
0.1.50 |
com.jolbox |
bonecp |
0.8.0.RELEASE |
com.lihaoyi |
sourcecode_2.12 |
0.1.9 |
com.microsoft.azure |
azure-data-lake-store-sdk |
2.3.9 |
com.microsoft.sqlserver |
mssql-jdbc |
9.2.1.jre8 |
com.ning |
compress-lzf |
1.0.3 |
com.sun.mail |
javax.mail |
1.5.2 |
com.tdunning |
json |
1.8 |
com.thoughtworks.paranamer |
paranamer |
2.8 |
com.trueaccord.lenses |
lenses_2.12 |
0.4.12 |
com.twitter |
chill-java |
0.9.5 |
com.twitter |
chill_2.12 |
0.9.5 |
com.twitter |
util-app_2.12 |
7.1.0 |
com.twitter |
util-core_2.12 |
7.1.0 |
com.twitter |
util-function_2.12 |
7.1.0 |
com.twitter |
util-jvm_2.12 |
7.1.0 |
com.twitter |
util-lint_2.12 |
7.1.0 |
com.twitter |
util-registry_2.12 |
7.1.0 |
com.twitter |
util-stats_2.12 |
7.1.0 |
com.typesafe |
配置 |
1.2.1 " |
com.typesafe.scala-logging |
scala-logging_2.12 |
3.7.2章 |
com.univocity |
univocity-parsers |
2.9.1 |
com.zaxxer |
HikariCP |
3.1.0 |
commons-beanutils |
commons-beanutils |
1.9.4 |
commons-cli |
commons-cli |
1.2 |
commons-codec |
commons-codec |
1.10 |
commons-collections |
commons-collections |
3.2.2 |
commons configuration |
commons configuration |
1.6 |
commons-dbcp |
commons-dbcp |
1.4 |
commons-digester |
commons-digester |
1.8 |
commons-fileupload |
commons-fileupload |
1.3.3 |
commons-httpclient |
commons-httpclient |
3.1 |
commons-io |
commons-io |
2.4 |
commons lang |
commons lang |
2.6 |
通用日志 |
通用日志 |
1.1.3 |
commons net |
commons net |
3.1 |
commons-pool |
commons-pool |
1.5.4 |
蜂巢2.7 - 2.3 - __hadoop - |
jets3t - 0.7 |
liball_deps_2.12 |
蜂巢2.7 - 2.3 - __hadoop - |
动物园管理员- 3.4 |
liball_deps_2.12 |
info.ganglia.gmetric4j |
gmetric4j |
1.0.10 |
io.airlift |
aircompressor |
0.10 |
io.delta |
delta-sharing-spark_2.12 |
0.1.0 |
io.dropwizard.metrics |
metrics-core |
以下4.4.1 |
io.dropwizard.metrics |
metrics-graphite |
以下4.4.1 |
io.dropwizard.metrics |
metrics-healthchecks |
以下4.4.1 |
io.dropwizard.metrics |
metrics-jetty9 |
以下4.4.1 |
io.dropwizard.metrics |
metrics-jmx |
以下4.4.1 |
io.dropwizard.metrics |
metrics-json |
以下4.4.1 |
io.dropwizard.metrics |
metrics-jvm |
以下4.4.1 |
io.dropwizard.metrics |
metrics-servlets |
以下4.4.1 |
io.netty |
netty-all |
4.1.51.Final |
io.prometheus |
simpleclient |
0.7.0 |
io.prometheus |
simpleclient_common |
0.7.0 |
io.prometheus |
simpleclient_dropwizard |
0.7.0 |
io.prometheus |
simpleclient_pushgateway |
0.7.0 |
io.prometheus |
simpleclient_servlet |
0.7.0 |
io.prometheus.jmx |
收集器 |
0.12.0 |
jakarta.annotation |
jakarta.annotation-api |
1.3.5 |
jakarta.validation |
jakarta.validation-api |
2.0.2 |
jakarta.ws.rs |
jakarta.ws.rs-api |
2.1.6 |
javax.activation |
激活 |
1.1.1 |
javax.el |
javax.el-api |
2.2.4 |
javax.jdo |
jdo api |
3.0.1 |
javax.servlet |
javax.servlet-api |
3.1.0 |
javax.servlet.jsp |
jsp-api |
2.1 |
javax.transaction |
jta |
1.1 |
javax.transaction |
事务api |
1.1 |
javax.xml.bind |
jaxb-api |
2.2.2 |
javax.xml.stream |
stax-api |
1.0 - 2 |
javolution |
javolution |
5.5.1 |
jline |
jline |
2.14.6 |
joda-time |
joda-time |
2.10.5 |
log4j |
apache-log4j-extras |
1.2.17 |
log4j |
log4j |
1.2.17 |
maven-trees |
蜂巢2.7 - 2.3 - __hadoop - |
liball_deps_2.12 |
net.java.dev.jna |
jna |
5.8.0 |
net.razorvine |
地幔岩 |
4.30 |
net.sf.jpam |
jpam |
1.1 |
net.sf.opencsv |
opencsv |
2.3 |
net.sf.supercsv |
super-csv |
2.2.0 |
net.snowflake |
snowflake-ingest-sdk |
0.9.6 |
net.snowflake |
snowflake-jdbc |
3.13.3 |
net.snowflake |
spark-snowflake_2.12 |
2.9.0-spark_3.1 |
net.sourceforge.f2j |
arpack_combined_all |
0.1 |
org.acplt.remotetea |
remotetea-oncrpc |
1.1.2 |
org.antlr |
ST4 |
4.0.4 |
org.antlr |
antlr-runtime |
3.5.2 |
org.antlr |
antlr4-runtime |
4.8 - 1 |
org.antlr |
stringtemplate |
3.2.1之上 |
org.apache.ant |
蚂蚁 |
1.9.2 |
org.apache.ant |
ant-jsch |
1.9.2 |
org.apache.ant |
ant-launcher |
1.9.2 |
org.apache.arrow |
arrow-format |
2.0.0 |
org.apache.arrow |
arrow-memory-core |
2.0.0 |
org.apache.arrow |
arrow-memory-netty |
2.0.0 |
org.apache.arrow |
arrow-vector |
2.0.0 |
org.apache.avro |
avro |
1.8.2 |
org.apache.avro |
avro-ipc |
1.8.2 |
org.apache.avro |
avro-mapred-hadoop2 |
1.8.2 |
org.apache.commons |
commons-compress |
1.20 |
org.apache.commons |
commons-crypto |
1.1.0 |
org.apache.commons |
commons-lang3 |
3.10 |
org.apache.commons |
commons-math3 |
3.4.1 |
org.apache.commons |
commons-text |
1.6 |
org.apache.curator |
curator-client |
2.7.1 |
org.apache.curator |
curator-framework |
2.7.1 |
org.apache.curator |
curator-recipes |
2.7.1 |
org.apache.derby |
德比 |
10.12.1.1 |
org.apache.directory.api |
api-asn1-api |
1.0.0-M20 |
org.apache.directory.api |
api-util |
1.0.0-M20 |
org.apache.directory.server |
apacheds-i18n |
2.0.0-M15 |
org.apache.directory.server |
apacheds-kerberos-codec |
2.0.0-M15 |
org.apache.hadoop |
hadoop-annotations |
第2.7.4 |
org.apache.hadoop |
hadoop-auth |
第2.7.4 |
org.apache.hadoop |
hadoop-client |
第2.7.4 |
org.apache.hadoop |
hadoop-common |
第2.7.4 |
org.apache.hadoop |
hadoop-hdfs |
第2.7.4 |
org.apache.hadoop |
hadoop-mapreduce-client-app |
第2.7.4 |
org.apache.hadoop |
hadoop-mapreduce-client-common |
第2.7.4 |
org.apache.hadoop |
hadoop-mapreduce-client-core |
第2.7.4 |
org.apache.hadoop |
hadoop-mapreduce-client-jobclient |
第2.7.4 |
org.apache.hadoop |
hadoop-mapreduce-client-shuffle |
第2.7.4 |
org.apache.hadoop |
hadoop-yarn-api |
第2.7.4 |
org.apache.hadoop |
hadoop-yarn-client |
第2.7.4 |
org.apache.hadoop |
hadoop-yarn-common |
第2.7.4 |
org.apache.hadoop |
hadoop-yarn-server-common |
第2.7.4 |
org.apache.hive |
hive-beeline |
2.3.7 |
org.apache.hive |
hive-cli |
2.3.7 |
org.apache.hive |
hive-jdbc |
2.3.7 |
org.apache.hive |
hive-llap-client |
2.3.7 |
org.apache.hive |
hive-llap-common |
2.3.7 |
org.apache.hive |
hive-serde |
2.3.7 |
org.apache.hive |
hive-shims |
2.3.7 |
org.apache.hive |
hive-storage-api |
2.7.2 |
org.apache.hive.shims |
蜂巢0.23 -垫片 |
2.3.7 |
org.apache.hive.shims |
hive-shims-common |
2.3.7 |
org.apache.hive.shims |
hive-shims-scheduler |
2.3.7 |
org.apache.htrace |
htrace-core |
3.1.0-incubating |
org.apache.httpcomponents |
httpclient |
4.5.6 |
org.apache.httpcomponents |
httpcore |
4.4.12 |
org.apache.ivy |
艾薇 |
测试盒框 |
org.apache.mesos |
mesos-shaded-protobuf |
1.4.0 |
org.apache.orc |
orc-core |
1.5.12 |
org.apache.orc |
orc-mapreduce |
1.5.12 |
org.apache.orc |
orc-shims |
1.5.12 |
org.apache.parquet |
parquet-column |
1.10.1-databricks9 |
org.apache.parquet |
parquet-common |
1.10.1-databricks9 |
org.apache.parquet |
parquet-encoding |
1.10.1-databricks9 |
org.apache.parquet |
parquet-format |
测试盒框 |
org.apache.parquet |
parquet-hadoop |
1.10.1-databricks9 |
org.apache.parquet |
parquet-jackson |
1.10.1-databricks9 |
org.apache.thrift |
libfb303 |
0.9.3 |
org.apache.thrift |
libthrift |
0.12.0 |
org.apache.xbean |
xbean-asm7-shaded |
4.15 |
org.apache.yetus |
audience-annotations |
0.5.0 |
org.apache.zookeeper |
动物园管理员 |
3.4.14 |
org.codehaus.jackson |
jackson-core-asl |
1.9.13 |
org.codehaus.jackson |
jackson-jaxrs |
1.9.13 |
org.codehaus.jackson |
jackson-mapper-asl |
1.9.13 |
org.codehaus.jackson |
jackson-xc |
1.9.13 |
org.codehaus.janino |
commons-compiler |
3.0.16 |
org.codehaus.janino |
janino |
3.0.16 |
org.datanucleus |
datanucleus-api-jdo |
4.2.4 |
org.datanucleus |
datanucleus-core |
4.1.17 |
org.datanucleus |
datanucleus-rdbms |
4.1.19 |
org.datanucleus |
javax.jdo |
3.2.0-m3 |
org.eclipse.jetty |
jetty-client |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-continuation |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-http |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-io |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-jndi |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-plus |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-proxy |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-security |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty服务器 |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty servlet |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-servlets |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-util |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-util-ajax |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-webapp |
9.4.36.v20210114 |
org.eclipse.jetty |
jetty-xml |
9.4.36.v20210114 |
org.fusesource.leveldbjni |
leveldbjni-all |
1.8 |
org.glassfish.hk2 |
hk2-api |
2.6.1 |
org.glassfish.hk2 |
hk2-locator |
2.6.1 |
org.glassfish.hk2 |
hk2-utils |
2.6.1 |
org.glassfish.hk2 |
osgi-resource-locator |
1.0.3 |
org.glassfish.hk2.external |
aopalliance-repackaged |
2.6.1 |
org.glassfish.hk2.external |
jakarta.inject |
2.6.1 |
org.glassfish.jersey.containers |
jersey-container-servlet |
2.30 |
org.glassfish.jersey.containers |
jersey-container-servlet-core |
2.30 |
org.glassfish.jersey.core |
jersey客户端 |
2.30 |
org.glassfish.jersey.core |
jersey-common |
2.30 |
org.glassfish.jersey.core |
jersey-server |
2.30 |
org.glassfish.jersey.inject |
jersey-hk2 |
2.30 |
org.glassfish.jersey.media |
jersey-media-jaxb |
2.30 |
org.hibernate.validator |
hibernate验证框架 |
6.1.0.Final |
org.javassist |
javassist |
3.25.0-GA |
org.jboss.logging |
jboss-logging |
3.3.2.Final |
org.jdbi |
jdbi |
2.63.1 |
org.joda |
joda-convert |
1.7 |
org.jodd |
jodd-core |
3.5.2 |
org.json4s |
json4s-ast_2.12 |
3.7.0-M5 |
org.json4s |
json4s-core_2.12 |
3.7.0-M5 |
org.json4s |
json4s-jackson_2.12 |
3.7.0-M5 |
org.json4s |
json4s-scalap_2.12 |
3.7.0-M5 |
org.lz4 |
lz4-java |
1.7.1上 |
org.mariadb.jdbc |
mariadb-java-client |
2.2.5 |
org.objenesis |
objenesis |
2.5.1 |
org.postgresql |
postgresql |
42.1.4 |
org.roaringbitmap |
RoaringBitmap |
0.9.14 |
org.roaringbitmap |
垫片 |
0.9.14 |
org.rocksdb |
rocksdbjni |
6.20.3 |
org.rosuda.REngine |
REngine |
魅惑 |
org.scala-lang |
scala-compiler_2.12 |
2.12.10 |
org.scala-lang |
scala-library_2.12 |
2.12.10 |
org.scala-lang |
scala-reflect_2.12 |
2.12.10 |
org.scala-lang.modules |
scala-collection-compat_2.12 |
2.1.1 |
org.scala-lang.modules |
scala-parser-combinators_2.12 |
1.1.2 |
org.scala-lang.modules |
scala-xml_2.12 |
1.2.0 |
org.scala-sbt |
测试界面 |
1.0 |
org.scalacheck |
scalacheck_2.12 |
1.14.2 |
org.scalactic |
scalactic_2.12 |
3.0.8 |
org.scalanlp |
breeze-macros_2.12 |
1.0 |
org.scalanlp |
breeze_2.12 |
1.0 |
org.scalatest |
scalatest_2.12 |
3.0.8 |
org.slf4j |
jcl-over-slf4j |
1.7.30 |
org.slf4j |
jul-to-slf4j |
1.7.30 |
org.slf4j |
slf4j-api |
1.7.30 |
org.slf4j |
slf4j-log4j12 |
1.7.30 |
org.spark-project.spark |
未使用的 |
1.0.0 |
org.springframework |
spring核心 |
4.1.4.RELEASE |
org.springframework |
spring测试 |
4.1.4.RELEASE |
org.threeten |
threeten-extra |
1.5.0 |
org.tukaani |
xz |
1.5 |
org.typelevel |
algebra_2.12 |
2.0.0-M2 |
org.typelevel |
cats-kernel_2.12 |
2.0.0-M4 |
org.typelevel |
machinist_2.12 |
0.6.8 |
org.typelevel |
macro-compat_2.12 |
1.1.1 |
org.typelevel |
spire-macros_2.12 |
0.17.0-M1 |
org.typelevel |
spire-bob体育客户端下载platform_2.12 |
0.17.0-M1 |
org.typelevel |
spire-util_2.12 |
0.17.0-M1 |
org.typelevel |
spire_2.12 |
0.17.0-M1 |
org.wildfly.openssl |
wildfly-openssl |
1.0.7.Final |
org.xerial |
sqlite-jdbc |
3.8.11.2 |
org.xerial.snappy |
snappy-java |
1.1.8.2 |
org.yaml |
snakeyaml |
1.24 |
奥罗 |
奥罗 |
2.0.8 |
pl.edu.icm |
JLargeArrays |
1.5 |
software.amazon.ion |
ion-java |
1.0.2中 |
stax |
stax-api |
1.0.1 |
xmlenc |
xmlenc |
0.52 |