砖13.1运行时

2023年5月砖发布这些图片。

以下版本注释提供信息数据砖13.1运行时,由Apache 3.4.0火花。

新特性和改进

读卡夫卡与SQL

您现在可以使用read_kafka阅读卡夫卡数据的SQL函数。与SQL支持流媒体只有在三角洲住在砖SQL表或流表。看到read_kafka表值函数

新的SQL内置函数

增加了以下功能:

统一目录支持集群级Python库

统一目录库的使用上有一些局限性。上面的砖13.1运行时,集群级支持Python库,包括Python轮子作为工作区文件上传。引用的库不支持使用DBFS filepaths,无论是在DBFS DBFS根或外部位置安装。不支持非python库。看到集群库

砖运行时的13.0及以下、集群级库不支持在集群中使用共享访问模式统一Catalog-enabled工作区。

扩展默认启用优化统一目录中写道

默认优化编写支持δ在统一目录已经扩大到包括注册表商品交易顾问基金语句和插入分区表的操作。这种行为将违约SQL仓库。看到优化为三角洲湖砖

高级支持结构化流状态运营商工作负载

现在可以把多个状态操作串在一起,这意味着你可以养活一个操作的输出作为另一个窗口的聚合状态连接等操作。看到优化状态结构化流查询

δ克隆统一目录是在公共预览

您现在可以使用浅克隆创建新的统一目录管理表从现有统一目录管理表。看到统一目录管理表浅克隆

发布/订阅支持结构化流

您现在可以使用一个内置连接器订阅Google Pub / Sub结构化流。看到订阅谷歌Pub / Sub

减少重复在水印结构化流

您现在可以使用dropDuplicatesWithinWatermark结合特定水印在结构化流阈值删除处理记录。看到减少重复在水印

现在可用触发运动支持的数据源

您现在可以使用Trigger.AvailableNow消费记录运动作为增量与结构化流批处理。看到摄取动作记录作为增量的批处理

对三角洲的扩展支持转换从冰山具有截断分区的表列

您现在可以使用克隆转换δ与冰山截断的列上定义的表,分区类型int,,字符串。截断的列类型小数不受支持。

在三角洲湖流模式变化和列映射

你现在可以提供一个模式跟踪位置,使流从三角洲启用表和列映射。看到流和列映射模式变化

删除版本开始

开始版本现在是不赞成改变分享

新H3表达式可以使用Python

h3_coverash3h3_coverash3string表达式是使用Python。

错误修复

镶木地板failOnUnknownFields不再默默地下降的数据类型不匹配

如果一个拼花文件仅仅是阅读failOnUnknownFields选择或与自动加载程序failOnNewColumns模式演化模式,具有不同数据类型的列现在失败,建议使用rescuedDataColumn。自动加载程序现在正确地读取和不再救援整数,短,或字节类型是否提供这些数据类型之一。镶木地板文件显示其他两种类型。

突发的变化

sqlite-jdbc版本升级到3.42.0.0解决cve - 2023 - 32697

从3.8.11.2 3.42.0.0 sqlite-jdbc升级版本。版本的api 3.42.0.0并不与3.8.11.2完全兼容。如果在代码中使用sqlite-jdbc,检查sqlite-jdbc兼容性报告细节。如果你迁移到13.1,使用sqlite,确认您3.42.0.0方法和返回类型版本。

库升级

  • 升级的Python库:

    • facets-overview 1.0.3 1.0.2中

    • filelock 3.10.7 3.12.0

    • pyarrow 7.0.0 8.0.0

    • 韧性8.0.1 8.1.0

  • 升级R库:

  • 升级Java库:

    • com.github.ben-manes.caffeine。咖啡因是2.3.4 2.9.3

    • org.apache.orc。orc-core从1.8。2-shaded-protobuf to 1.8.3-shaded-protobuf

    • org.apache.orc。orc-mapreduce从1.8。2-shaded-protobuf to 1.8.3-shaded-protobuf

    • org.apache.orc。orc-shims从1.8。2 to 1.8.3

    • org.checkerframework。checker-qual从3.5.0 to 3.19.0

    • org.scalactic.scalactic_2.12 3.0.8 3.2.15

    • org.scalatest.scalatest_2.12 3.0.8 3.2.15

    • org.xerial。sqlite-jdbc从3.8.11.2 to 3.42.0.0

Apache火花

砖13.1运行时包含Apache 3.4.0火花。这个版本包括所有火花修复和改进中砖13.0运行时以及以下额外的bug修复和改进了火花:

  • (火花- 42719)[dbrrm - 199] [sc - 131578]恢复“[sc - 125225] MapOutputTracker # getMap…

  • (火花- 39696)[dbrrm - 166] [sc - 130056](核心)回复(sc - 127830) /

  • (火花- 43331)(sc - 130064)(连接)添加火花SparkSession.interruptAll连接

  • (火花- 16484)[13.1][CHERRY_PICK] [sc - 130076] [SQL]为代表DataSketches使用8位寄存器

  • (火花- 43332)(sc - 130051)(连接)(PYTHON)可以延长ChannelBuilder SparkConnectClient

  • (火花- 43323)PYTHON (sc - 129966) [SQL] [] DataFrame修复。来Pandas with Arrow enabled to handle exceptions properly

  • (火花- 42940)(sc - 129896) [SS][连接]改善流媒体会话管理查询

  • (火花- 43336)[SQL]之间的铸造时间戳和TimestampNTZ需要时区

  • (火花- 43032)(sc - 125756][连接][SS]添加流查询管理器

  • (火花- 16484)(sc - 129975] [SQL]添加支持Datasketches HllSketch

  • (火花- 43260)(sc - 129281] (PYTHON)迁移火花到错误类SQL熊猫箭头类型错误。

  • (火花- 41766)(sc - 129964)(核心)处理请求解除之前发送执行人登记

  • (火花- 43307)(sc - 129971] (PYTHON)迁移PandasUDF值错误到错误类

  • (火花- 43206)(sc - 129903) [SS][连接]StreamingQuery异常()包括堆栈跟踪

  • (火花- 43311)(sc - 129905) [SS]添加RocksDB状态存储提供商内存管理增强功能

  • (火花- 43237)(sc - 129898)(核心)处理零异常事件日志消息

  • (火花- 43320)(sc - 129899] [SQL][蜂巢]直接调用蜂巢2.3.9 API

  • (火花- 43270)(sc - 129897] (PYTHON)实现__dir__ ()pyspark.sql.dataframe.DataFrame包括列

  • (火花- 43183)恢复“(sc - 128938) [SS]引入一个新的回调”…

  • (火花- 43143)(sc - 129902) [SS][连接]Scala StreamingQuery awaitTermination ()

  • (火花- 43257)(sc - 129675] [SQL]取代错误的类遗产ERROR_TEMP_2022内部错误

  • (火花- 43198)(sc - 129470)(连接)修复”不能初始化类亚扪人…”错误当使用过滤器

  • (火花- 43165)(sc - 129777] [SQL] canWrite DataTypeUtils

  • (火花- 43298)(sc - 129729] [PYTHON] (ML) predict_batch_udf与标量输入失败与批量大小

  • (火花- 43298)(sc - 129700)恢复”(PYTHON) (ML) predict_batch_udf标量输入失败批大小的一个“

  • (火花- 43052)(sc - 129663)(核心)处理与零加在事件日志文件的名字

  • (火花- 43183)(sc - 128938) [SS]引入新的回调StreamingQueryListener“onQueryIdle”

  • (火花- 43209)(sc - 129190)(连接)(PYTHON)迁移到错误类表达错误

  • (火花- 42151)(sc - 128754] [SQL]使更新作业与表的属性

  • (火花- 43134)(sc - 129468][连接][SS] JVM客户StreamingQuery异常()API

  • (火花- 43298)(sc - 129699] [PYTHON] (ML) predict_batch_udf与标量输入失败与批量大小

  • (火花- 43248)(sc - 129660] [SQL]不必要的序列化/反序列化的路径并行收集分区统计数据

  • (火花- 43274)(sc - 129464)[火花- 43275](PYTHON)(连接)介绍PySparkNotImplementedError

  • (火花- 43146)(sc - 128804)(连接)PYTHON实现即时抓取reprreprhtml_

  • (火花- 42953)(sc - 129469)(连接)(后续)修复maven构建为Scala端UDF测试测试

  • (火花- 43144)(sc - 129280) Scala客户DataStreamReader表()API

  • (火花- 43136)(sc - 129358)(连接)添加groupByKey + mapGroup + coGroup功能

  • (火花- 43156)(sc - 129672) [sc - 128532] [SQL]修复COUNT (*)在相关标量子查询错误

  • (火花- 43046)(sc - 129110) [SS][连接]Python API dropDuplicatesWithinWatermark引发连接实现的

  • (火花- 43199)(sc - 129467] [SQL] InlineCTE幂等

  • (火花- 43293)(sc - 129657] [SQL]__qualified_access_only应该被忽略在正常列

  • (火花- 43276)(sc - 129461)(连接)(PYTHON)迁移引发连接窗口错误到错误类

  • (火花- 43174)(sc - 129109] [SQL]修复SparkSQLCLIDriver完成者

  • (火花- 43084)(sc - 128654) [SS]添加applyInPandasWithState支持引发连接

  • (火花- 43119)(sc - 129040] [SQL]支持动态SQL关键字通过JDBC API和时变滤波

  • (火花- 43082)(sc - 129112)(连接)(PYTHON) Arrow-optimized PYTHON udf引发连接

  • (火花- 43085)(sc - 128432] [SQL]支持列多部分的默认赋值表名

  • (火花- 43156)(sc - 129463)[火花- 43098][SQL]扩展标量子查询统计错误测试decorrelateInnerQuery禁用

  • (火花- 43226)(lc - 671)为文件常数元数据定义提取器

  • (火花- 43210)(sc - 129189)(连接)(PYTHON)介绍PySparkAssertionError

  • (火花- 43214)(sc - 129199] [SQL]文章LocalTableScanExec / CommandResultExec驾驶员一侧指标

  • (火花- 43285)(sc - 129347)修复ReplE2ESuite始终没有与JDK 17

  • (火花- 43268)(sc - 129249] [SQL]时使用适当的错误类异常是由一个信息

  • (火花- 43142)(sc - 129299)修复DSL表达式与特殊字符属性

  • (火花- 43129)(sc - 128896) Scala核心API为流引发连接

  • (火花- 43233)(sc - 129250) [SS]为卡夫卡批量添加日志阅读为主题分区,补偿范围和任务ID

  • (火花- 43249)(sc - 129195)(连接)修复缺失数据的SQL命令

  • (火花- 42945)(sc - 129188)(连接)支持PYSPARK_JVM_STACKTRACE_ENABLED引发连接

  • (火花- 43178)PYTHON (sc - 129197)[连接][]PySpark错误框架UDF迁移错误

  • (火花- 43123)(sc - 128494] [SQL]内部字段元数据不应泄露给目录

  • (火花- 43217)正确(sc - 129205)递归嵌套映射/ findNestedField数组

  • (火花- 43243)(sc - 129294] (PYTHON)(连接)参数为PYTHON printSchema添加水平

  • (火花- 43230)(sc - 129191)(连接)简化DataFrameNaFunctions.fillna

  • (火花- 43088)(sc - 128403] [SQL]尊重RequiresDistributionAndOrdering cta /区域贸易协定

  • (火花- 43234)(sc - 129192)(连接)(PYTHON)迁移ValueError从连接DataFrame错误类

  • (火花- 43212)(sc - 129187) [SS] [PYTHON)迁移到错误类结构化流错误

  • (火花- 43239)[sc - 129186] [p]删除null_counts从信息()

  • (火花- 43190)(sc - 128930) [SQL] ListQuery。childOutput应该符合孩子输出

  • (火花- 43191)(sc - 128924)(核心)代替反射w /直接呼吁Hadoop CallerContext

  • (火花- 43193)(sc - 129042) [SS]删除工作区hadoop - 12074

  • (火花- 42657)(sc - 128621)(连接)支持查找和传输客户端REPL类文件服务器构件

  • (火花- 43098)(sc - 77059] [SQL]修复正确性计数错误当标量子查询group by子句

  • (火花- 43213)(sc - 129062) (PYTHON)添加DataFrame.offset以香草PySpark

  • (火花- 42982)(sc - 128400)(连接)(PYTHON)修复createDataFrame尊重给定模式ddl

  • (火花- 43124)(sc - 129011) [SQL]数据集。显示项目CommandResults本地

  • (火花- 42998)(sc - 127422)(连接)(PYTHON)修复DataFrame。收集与零结构

  • (火花- 41498)(sc - 125343)恢复”传播元数据通过联盟”

  • (火花- 42960)(sc - 129010][连接][SS]添加await_termination()和异常()API来流在Python中查询

  • (火花- 42552)(sc - 128824] [SQL]正确antlr语法分析器的两级解析策略

  • (火花- 43207)(sc - 128937)(连接)添加辅助函数来提取值从字面表达式

  • (火花- 43186)(sc - 128841) [SQL][蜂巢)消除FileSinkDesc的解决方案

  • (火花- 43107)(sc - 128533) [SQL]合并桶连接应用于广播连接流

  • (火花- 43195)(sc - 128922)(核心)删除不必要的序列化HadoopFSUtils包装器

  • (火花- 43137)(sc - 128828] [SQL]改善ArrayInsert位置是否可折叠和积极的。

  • (火花- 37829)(sc - 128827) [SQL] Dataframe。joinWith外连接为无与伦比的行应该返回一个空值

  • (火花- 43042)(sc - 128602) [SS][连接]()API支持DataStreamReader添加表

  • (火花- 43153)(sc - 128753)(连接)跳过火花dataframe是本地时执行

  • (火花- 43064)(sc - 128496] [SQL]火花SQL CLI SQL选项卡应该只显示一次声明一次

  • (火花- 43126)(sc - 128447] [SQL]两个蜂巢UDF表达式标记为有状态

  • (火花- 43111)(sc - 128750] [p][连接](PYTHON)合并嵌套如果声明成单个如果语句

  • (火花- 43113)(sc - 128749] [SQL]评估溪边变量生成代码时的约束条件

  • (火花- 42895)(sc - 127258)(连接)改善停止错误消息引发会话

  • (火花- 42884)(sc - 126662)(连接)添加亚扪人REPL集成

  • (火花- 43168)(sc - 128674] [SQL]删除PhysicalDataType方法从数据类型类

  • (火花- 43121)(sc - 128455] [SQL]使用BytesWritable.copyBytes在“HiveInspectors代替手动复制

  • (火花- 42916)(sc - 128389] [SQL] JDBCTableCatalog保持Char、Varchar元读

  • (火花- 43050)(sc - 128550] [SQL]解决构建聚合表达式代替分组功能

  • (火花- 43095)(sc - 128549] [SQL]避免曾经为批处理策略的幂等性坏了:推断出过滤器

  • (火花- 43130)(sc - 128597] [SQL] InternalType PhysicalDataType

  • (火花- 43105)(sc - 128456)(连接)缩写字节和字符串消息原型

  • (火花- 43099)(sc - 128596] [SQL]使用getName而不是getCanonicalName要构建器类名称注册时FunctionRegistry udf

  • (火花- 42994)(sc - 128586] (ML)(连接)PyTorch经销商支持本地模式

  • (火花- 42859)恢复“(sc - 127935][连接][p]基本支持大熊猫API火花连接”

  • (火花- 43021)(sc - 128472] [SQL]CoalesceBucketsInJoin不能使用AQE时工作

  • (火花- 43125)(sc - 128477)(连接)修复连接零消息服务器无法处理的异常

  • (火花- 43147)(sc - 128594)修复flake8为当地检查线头

  • (火花- 43031)(sc - 128360) [SS][连接]使单元测试和doctest流

  • (火花- 43039)(lc - 67)支持文件源_metadata列中的定制字段。

  • (火花- 43120)(sc - 128407) [SS]添加支持跟踪RocksDB状态商店的固定块内存使用量

  • (火花- 43110)(sc - 128381] [SQL] asIntegral PhysicalDataType

  • (火花- 43118)(sc - 128398) [SS]删除不必要的断言KafkaMicroBatchStream UninterruptibleThread

  • (火花- 43055)(sc - 128331)(连接)(PYTHON)支持嵌套重复的字段名称

  • (火花- 42437)(sc - 128339] [PYTHON][连接]PySpark目录。缓存Table will allow to specify storage level

  • (火花- 42985)(sc - 128332)(连接)(PYTHON)修复createDataFrame尊重SQL配置

  • (火花- 39696)(sc - 127830)(核心)竞赛获得TaskMetrics.externalAccums修复数据

  • (火花- 43103)(sc - 128335] [SQL] PhysicalDataType移动积分

  • (火花- 42741)(sc - 125547] [SQL]不打开投在二进制比较文字为空

  • (火花- 43057)(sc - 127948)(连接)(PYTHON)迁移引发连接列错误到错误类

  • (火花- 42859)(sc - 127935][连接][p]基本支持大熊猫API引发连接

  • (火花- 43013)(sc - 127773) (PYTHON)迁移ValueError从DataFramePySparkValueError

  • (火花- 43089)(sc - 128051)(连接)编辑调试UI中的字符串

  • (火花- 43028)(sc - 128070] [SQL] SQL_CONF_NOT_FOUND添加错误类

  • (火花- 42999)(sc - 127842)(连接)数据集# foreach foreachPartition

  • (火花- 43066)(sc - 127937] [SQL]添加测试JavaDatasetSuite dropDuplicates

  • (火花- 43075)(sc - 127939)(连接)的变化gRPCgrpcio当它没有安装。

  • (火花- 42953)(sc - 127809)(连接)类型的过滤器,地图,flatMap mapPartitions

  • (火花- 42597)(sc - 125506] [SQL]支持打开日期类型时间戳的类型

  • (火花- 42931)(sc - 127933) [SS] dropDuplicatesWithinWatermark介绍

  • (火花- 43073)(sc - 127943)(连接)添加原型数据类型常量

  • (火花- 43077)(sc - 128050] [SQL]提高UNRECOGNIZED_SQL_TYPE的错误消息

  • (火花- 42951)(sc - 128030) [SS][连接]DataStreamReader api

  • (火花- 43049)(sc - 127846] [SQL]使用CLOB代替VARCHAR (255) StringType Oracle JDBC

  • (火花- 43018)(sc - 127762] [SQL]修复bug与时间戳文字插入命令

  • (火花- 42855)(sc - 127722] [SQL]使用运行时在TableOutputResolver null检查

  • (火花- 43030)(sc - 127847] [SQL]删除处理关系元数据列

  • (火花- 42993)(sc - 127829] (ML)(连接)使PyTorch经销商与火花连接兼容

  • (火花- 43058)(sc - 128072] [SQL] PhysicalDataType移动数字和分数

  • (火花- 43056)(sc - 127946) [SS] RocksDB状态存储提交应该继续背景的工作只有在它停了下来

  • (火花- 43059)(sc - 127947)(连接)(PYTHON)迁移TypeError DataFrame(读者|作者)错误类

  • (火花- 43071)(sc - 128018] [SQL]支持选择默认顺序,极限,抵消插入源关系

  • (火花- 43061)(sc - 127956)(核心)[SQL]介绍PartitionEvaluator SQL操作执行

  • (火花- 43067)(sc - 127938) [SS]正确的位置误差在卡夫卡连接器类资源文件

  • (火花- 43019)(sc - 127844] [SQL] PhysicalDataType移动顺序

  • (火花- 43010)(sc - 127759] (PYTHON)迁移到错误类列错误

  • (火花- 42840)(sc - 127782] [SQL]变化_LEGACY_ERROR_TEMP_2004错误内部错误

  • (火花- 43041)(sc - 127765] [SQL]恢复构造函数的异常在连接器API兼容性

  • (火花- 42939)(sc - 127761) [SS](连接)核心流Python API引发连接

  • (火花- 42844)(sc - 127766] [SQL]更新错误类_LEGACY_ERROR_TEMP_2008INVALID_URL

  • (火花- 42316)(sc - 127720) [SQL]命名遗产ERROR_TEMP_2044

  • (火花- 42995)(sc - 127723)(连接)(PYTHON)迁移引发DataFrame错误连接到错误类

  • (火花- 42983)(sc - 127717)(连接)(PYTHON)修复createDataFrame处理0-dim numpy数组

  • (火花- 42955)(sc - 127476] [SQL]跳过classifyException包装AnalysisException SparkThrowable

  • (火花- 42949)(sc - 127255] [SQL] NAAJ简化代码

  • (火花- 43011)(sc - 127577] [SQL]array_insert失败与0索引

  • (火花- 42974)(sc - 127487)(核心)恢复Utils.createTempDir使用ShutdownHookManager和清理JavaUtils.createTempDir方法。

  • (火花- 42964)(sc - 127585] [SQL] PosgresDialect“42 p07”也意味着表已经存在

  • (火花- 42978)(sc - 127351) [SQL] Derby&PG:重命名模式名称不能符合新的表名

  • (火花- 37980)(sc - 127668] [SQL]通过_metadata访问row_index如果可能在测试中

  • (火花- 42655)(sc - 127591] [SQL]不正确的模糊列引用错误

  • (火花- 43009)(sc - 127596) [SQL]参数化sql ()任何常量

  • (火花- 43026)(sc - 127590] [SQL]应用AQE无论表缓存

  • (火花- 42963)(sc - 127576] [SQL]扩展SparkSessionExtensions AQE注入规则查询优化器阶段

  • (火花- 42918)(sc - 127357)概括FileSourceStrategy处理元数据属性

  • (火花- 42806)(sc - 127452)[火花- 42811][连接]添加目录支持

  • (火花- 42997)(sc - 127535] [SQL] TableOutputResolver必须使用正确的列在错误消息路径数组和地图

  • (火花- 43006)(sc - 127486] [PYSPARK] StorageLevel修复错误情商()

  • (火花- 43005)(sc - 127485] [PYSPARK]修复错误在PYSPARK /熊猫/ config.py

  • (火花- 43004)(sc - 127457)(核心)修复错误ResourceRequest.equals ()

  • (火花- 42907)(sc - 126984)(连接)PYTHON实现Avro功能

  • (火花- 42979)(sc - 127272] [SQL]文字构造函数定义为关键字

  • (火花- 42946)(sc - 127252] [SQL]编辑敏感数据由变量替换嵌套

  • (火花- 42952)(sc - 127260] [SQL]简化分析的参数规则PreprocessTableCreation和DataSourceAnalysis

  • (火花- 42683)(lc - 75)自动重命名冲突的元数据列

  • (火花- 42853)(sc - 126101](后续)解决冲突

  • (火花- 42929)(sc - 126748)(连接)使mapInPandas / mapInArrow支持“is_barrier”

  • (火花- 42968)(sc - 127271) [SS]添加选项跳过提交协调员作为DSv2 StreamingWrite API的一部分源/汇

  • (火花- 42954)(sc - 127261] (PYTHON)(连接)添加YearMonthIntervalTypePySpark和火花Python客户机连接

  • (火花- 41359)(sc - 127256] [SQL]使用PhysicalDataType而不是在UnsafeRow数据类型

  • (火花- 42873)(sc - 127262] [SQL]火花SQL类型定义为关键字

  • (火花- 42808)(sc - 126302)(核心)避免availableProcessors每次MapOutputTrackerMaster # getStatistics

  • (火花- 42937)(sc - 126880] [SQL]PlanSubqueries应该设定InSubqueryExec # shouldBroadcast为真

  • (火花- 42896)PYTHON (sc - 126729) [SQL] []mapInPandas/mapInArrow支持障碍模式执行

  • (火花- 42874)(sc - 126442] [SQL]启用新的黄金文件对所有输入文件测试框架进行分析

  • (火花- 42922)(sc - 126850) [SQL]从随机移动到SecureRandom

  • (火花- 42753)(sc - 126369) ReusedExchange指不存在节点

  • (火花- 40822)(sc - 126274] [SQL]稳定派生列别名

  • (火花- 42908)(sc - 126856] (PYTHON)提高RuntimeError当SparkContext但不需要初始化

  • (火花- 42779)(sc - 126042] [SQL]允许V2写入显示咨询调整分区大小

  • (火花- 42914)(sc - 126727] (PYTHON)重用transformUnregisteredFunctionDistributedSequenceID

  • (火花- 42878)(sc - 126882)(连接)表API DataFrameReader还可以接受的选择

  • (火花- 42927)(sc - 126883)(核心)改变的访问范围o.a.spark.util.Iterators #大小私人(util)

  • (火花- 42943)(sc - 126879] [SQL]使用量变而不是文本StringType有效长度

  • (火花- 37677)(sc - 126855)(核心)解压缩文件权限

  • (火花- 42891)(13。x] [sc - 126458][连接]PYTHON实现CoGrouped地图API

  • (火花- 41876)(sc - 126849)(连接)(PYTHON)实现DataFrame.toLocalIterator

  • (火花- 42930)(sc - 126761)(核心)[SQL]改变访问的范围ProtobufSerDe相关的实现私人(protobuf)

  • (火花- 42819)(sc - 125879) [SS]添加支持设置max_write_buffer_number和write_buffer_size RocksDB用于流媒体

  • (火花- 42924)(sc - 126737] [SQL][连接][PYTHON]明确参数化SQL参数的评论

  • (火花- 42748)(sc - 126455)(连接)服务器端构件管理

  • (火花- 42816)(sc - 126365)(连接)支持最大消息大小为128 mb

  • (火花- 42850)(sc - 126109] [SQL]删除重复的规则CombineFilters优化器

  • (火花- 42662)(sc - 126355][连接][p]为熊猫API添加典型消息引发违约指数

  • (火花- 42720)(sc - 126136] [p] [SQL]使用表达式distributed-sequence默认索引而不是计划

  • (火花- 42790)(sc - 126174] [SQL]摘要排除JDBC码头工人更好的测试方法测试。

  • (火花- 42900)(sc - 126473)(连接)(PYTHON)修复createDataFrame尊重推理和列的名称

  • (火花- 42917)(sc - 126657] [SQL]正确getUpdateColumnNullabilityQuery DerbyDialect

  • (火花- 42684)(sc - 125157] [SQL] v2目录不应该允许默认列的默认值

  • (火花- 42861)(sc - 126635] [SQL]使用私人[SQL]而不是保护[SQL]避免生成API文档

  • (火花- 42920)PYTHON (sc - 126728)[连接][]使测试与UDT UDF

  • (火花- 42791)(sc - 126617] [SQL]创建一个新的黄金文件测试框架进行分析

  • (火花- 42911)(sc - 126652] (PYTHON)引入更多基本的异常

  • (火花- 42904)(sc - 126634] [SQL] Char、Varchar支持JDBC目录

  • (火花- 42901)(sc - 126459)(连接)(PYTHON)移动StorageLevel到一个单独的文件,以避免潜在的文件递归地进口

  • (火花- 42894)(sc - 126451)(连接)的支持缓存/坚持/unpersist/storageLevel火花jvm连接客户端

  • (火花- 42792)(sc - 125852) [SS]添加支持WRITE_FLUSH_BYTES RocksDB用于流状态

  • (火花- 41233)(sc - 126441)(连接)(PYTHON)添加array_prepend火花PYTHON客户机连接

  • (火花- 42681)(sc - 125149] [SQL]放松点约束改变表添加|取代列描述符

  • (火花- 42889)(sc - 126367)(连接)(PYTHON)实现缓存,持续下去,unpersist, storageLevel

  • (火花- 42824)(sc - 125985)(连接)(PYTHON)不支持JVM属性提供一个清晰的错误消息

  • (火花- 42340)(sc - 126131)(连接)PYTHON实现分组地图API

  • (火花- 42892)(sc - 126454] [SQL] sameType和相关方法的数据类型

  • (火花- 42827)(sc - 126126)(连接)的支持功能# array_prependScala连接客户端

  • (火花- 42823)(sc - 125987] [SQL]spark-sqlshell支持初始化的多部分名称空间

  • (火花- 42817)(sc - 125960)(核心)记录在ApplicationMaster洗牌服务名称一次

  • (火花- 42786)(sc - 126438)(连接)类型的选择

  • (火花- 42800)PYTHON (sc - 125868)[连接][](ML)实现毫升函数{array_to_vector,vector_to_array}

  • (火花- 42052)(sc - 126439] [SQL] Codegen HiveSimpleUDF支持

  • (火花- 41233)(sc - 126110] [SQL] [PYTHON]添加array_prepend函数

  • (火花- 42864)(sc - 126268] [ML] [3.4]IsotonicRegression.PointsAccumulator私人

  • (火花- 42876)(sc - 126281] [SQL]数据类型的physicalDataType应该私人[SQL]

  • (火花- 42101)(sc - 125437] [SQL]使InMemoryTableScanExec AQE支持

  • (火花- 41290)(sc - 124030] [SQL]支持生成始终作为创建/替换表中的列的表达式语句

  • (火花- 42870)(sc - 126220)(连接)toCatalystValueconnect-common

  • (火花- 42247)(sc - 126107)(连接)(PYTHON)修复UserDefinedFunction returnType

  • (火花- 42875)(sc - 126258)(连接)(PYTHON)修复toPandas妥善处理时区和地图类型

  • (火花- 42757)(sc - 125626)(连接)为DataFrameReader实现文本文件

  • (火花- 42803)(sc - 126081)(核心)[SQL] (ML)使用getParameterCount函数代替getParameterTypes.length

  • (火花- 42833)(sc - 126043) [SQL]重构applyExtensionsSparkSession

  • (火花- 41765)恢复“(sc - 123550] [SQL]退出v1写指标…

  • (火花- 42848)(sc - 126105)(连接)(PYTHON)实现DataFrame.registerTempTable

  • (火花- 42020)(sc - 126103)(连接)(PYTHON)支持UserDefinedType引发连接

  • (火花- 42818)(sc - 125861)(连接)(PYTHON)实现DataFrameReader / Writer.jdbc

  • (火花- 42812)(sc - 125867)(连接)添加client_type AddArtifactsRequest protobuf消息

  • (火花- 42772)(sc - 125860] [SQL]改变对压低JDBC选项的默认值为true

  • (火花- 42771)(sc - 125855] [SQL]重构HiveGenericUDF

  • (火花- 25050)(sc - 123839) [SQL] Avro:编写复杂的工会

  • (火花- 42765)(sc - 125850)(连接)(PYTHON)允许进口pandas_udfpyspark.sql.connect.functions

  • (火花- 42719)(sc - 125225)(核心)MapOutputTracker # getMapLocation应该尊重spark.shuffle.reduceLocality.enabled

  • (火花- 42480)(sc - 125173] [SQL]提高下降的性能分区

  • (火花- 42689)(sc - 125195)(核心)(SHUFFLE)允许ShuffleDriverComponent声明如果洗牌数据被可靠地存储

  • (火花- 42726)(sc - 125279)(连接)(PYTHON)实现DataFrame.mapInArrow

  • (火花- 41765)(sc - 123550] [SQL]退出v1给writefile指标

  • (火花- 41171)(sc - 124191] [SQL]推断,如果partitionSpec压低窗口限制通过窗口是空的

  • (火花- 42686)(sc - 125292)(核心)推迟格式化TaskMemoryManager调试消息

  • (火花- 42756)(sc - 125443)(连接)(PYTHON) Helper函数原型文字转换为PYTHON客户机的价值

  • (火花- 42793)(sc - 125627)(连接)连接模块需要build_profile_flags

  • (火花- 42701)(sc - 125192) [SQL]添加try_aes_decrypt ()函数

  • (火花- 42679)PYTHON (sc - 125438)[连接][]createDataFrame不与非空模式

  • (火花- 42733)(sc - 125542)(连接)(后续)写没有路径或表

  • (火花- 42777)(sc - 125525] [SQL]支持TimestampNTZ编目统计数据转化为计划统计数据

  • (火花- 42770)(sc - 125558)(连接)添加truncatedTo (ChronoUnit.MICROS)为了使SQLImplicitsTestSuite在Java 17日报GA任务通过测试

  • (火花- 42752)(sc - 125550] [PYSPARK] [SQL]使PYSPARK异常可打印在初始化期间

  • (火花- 42732)(sc - 125544] [PYSPARK][连接]支持火花连接会话getActiveSession方法

  • (火花- 42755)(sc - 125442)(连接)因素文字值转换了connect-common

  • (火花- 42747)(sc - 125399] (ML)修复错误的卤到船尾的内部状态

  • (火花- 42740)(sc - 125439] [SQL]修复bug,叠加抵消一些内置的方言或分页无效

  • (火花- 42745)(sc - 125332] [SQL]改善AliasAwareOutputExpression与DSv2一起工作

  • (火花- 42743)(sc - 125330] [SQL]支持分析TimestampNTZ列

  • (火花- 42721)(sc - 125371)(连接)RPC记录拦截器

  • (火花- 42691)(sc - 125397)(连接)(PYTHON)实现Dataset.semanticHash

  • (火花- 42688)(sc - 124922)(连接)重命名连接原型请求client_id session_id

  • (火花- 42310)(sc - 122792) [SQL]命名遗产ERROR_TEMP_1289

  • (火花- 42685)(sc - 125339)(核心)优化跑龙套。bytesToString例程

  • (火花- 42725)PYTHON (sc - 125296)[连接][]使LiteralExpression支持数组参数

  • (火花- 42702)(sc - 125293)[火花- 42623][SQL]支持参数化查询子查询和CTE

  • (火花- 42697)(sc - 125189] [WEBUI]修复. ./api/v1/applications to return total uptime instead of 0 for the duration field

  • (火花- 42733)(sc - 125278)(连接)(PYTHON)修复DataFrameWriter。没有路径参数保存到工作

  • (火花- 42376)(sc - 124928) [SS]介绍水印运营商之间的传播

  • (火花- 42710)(sc - 125205)(连接)(PYTHON)重命名FrameMap MapPartitions原型

  • (火花- 37099)(sc - 123542] [SQL]介绍窗口的组限制rank-based滤波器优化top-k计算

  • (火花- 42630)PYTHON (sc - 125207)[连接][]介绍UnparsedDataType和推迟解析DDL字符串直到SparkConnectClient可用

  • (火花- 42690)(sc - 125193)(连接)为Scala客户机实现CSV / JSON解析函数

  • (火花- 42709)(sc - 125172] (PYTHON)删除的假设__file__是可用的

  • (火花- 42318)(sc - 122648)[火花- 42319][SQL]命名遗产ERROR_TEMP_ (2123 | 2125)

  • (火花- 42723)(sc - 125183] [SQL]支持json解析器数据类型“timestamp_ltz”TimestampType

  • (火花- 42722)PYTHON (sc - 125175)[连接][]PYTHON def连接模式()不应该缓存模式

  • (火花- 42643)(sc - 125152)(连接)(PYTHON)注册Java用户定义函数(聚合)

  • (火花- 42656)(sc - 125177)(连接)(后续)修复spark-connect脚本

  • (火花- 41516)(sc - 123899] [SQL]允许jdbc方言覆盖查询用于创建一个表

  • (火花- 41725)(sc - 124396)(连接)渴望执行DF.sql ()

  • (火花- 42687)(sc - 124896) [SS] unsupport更好的错误消息操作流

  • (火花- 42676)(sc - 124809) [SS]写临时检查站流查询本地文件系统即使违约FS设置不同

  • (火花- 42303)(sc - 122644) [SQL]命名遗产ERROR_TEMP_1326

  • (火花- 42553)(sc - 124560] [SQL]确保至少一个时间单位“间隔”后

  • (火花- 42649)(sc - 124576)(核心)删除标准Apache许可头从第三方源文件

  • (火花- 42611)(sc - 124395] [SQL]插入char、varchar长度检查内部字段在决议

  • (火花- 42419)(sc - 124019)(连接)(PYTHON)迁移到错误引发连接列的框架API。

  • (火花- 42637)(sc - 124522)(连接)添加SparkSession.stop ()

  • (火花- 42647)(sc - 124647] (PYTHON)改变为numpy弃用和删除类型别名

  • (火花- 42616)(sc - 124389] [SQL] SparkSQLCLIDriver只接近蜂巢sessionState开始

  • (火花- 42593)(sc - 124405] [p]轻视&删除在熊猫2.0的api将被删除。

  • (火花- 41870)(sc - 124402)(连接)(PYTHON)修复createDataFrame处理重复的列名

  • (火花- 42569)(sc - 124379)(连接)抛出异常不支持会话API

  • (火花- 42631)(sc - 124526)(连接)支持自定义扩展Scala中的客户端

  • (火花- 41868)(sc - 124387)(连接)(PYTHON)修复createDataFrame支持持续时间

  • (火花- 42572)(sc - 124171] [SQL] [SS] StateStoreProvider.validateStateRowFormat修复行为

维护更新

看到砖13.1运行时的维护更新

系统环境

  • 操作系统:Ubuntu 22.04.2 LTS

  • Java:祖鲁8.70.0.23-CA-linux64

  • Scala:2.12.15

  • Python:3.10.6

  • R:4.2.2

  • 三角洲湖:测试盒框

安装Python库

图书馆

版本

图书馆

版本

图书馆

版本

appdirs

1.4.4

argon2-cffi

21.3.0

argon2-cffi-bindings

21.2.0

asttokens

2.2.1

attrs

21.4.0

backcall

0.2.0

beautifulsoup4

4.11.1

黑色的

22.6.0

漂白剂

4.1.0

信号灯

1.4

boto3

1.24.28

botocore

1.27.28

certifi

2022.9.14

cffi

1.15.1

chardet

4.0.0

charset-normalizer

2.0.4

点击

8.0.4

密码学

37.0.1

周期计

0.11.0

Cython

0.29.32

dbus-python

1.2.18

debugpy

1.5.1

装饰

5.1.1

defusedxml

是0.7.1

distlib

0.3.6

docstring-to-markdown

0.12

entrypoints

0.4

执行

1.2.0

facets-overview

1.0.3

fastjsonschema

2.16.3

filelock

3.12.0

fonttools

4.25.0

googleapis-common-protos

1.56.4

grpcio

1.48.1

grpcio-status

1.48.1

httplib2

0.20.2

idna

3.3

importlib-metadata

4.6.4

ipykernel

6.17.1

ipython

8.10.0

ipython-genutils

0.2.0

ipywidgets

7.7.2

绝地武士

0.18.1

吉普车

是0.7.1

Jinja2

14

jmespath

0.10.0

joblib

1.2.0

jsonschema

4.16.0

jupyter-client

7.3.4

jupyter_core

4.11.2

jupyterlab-pygments

0.1.2

jupyterlab-widgets

1.0.0

密匙环

23.5.0

kiwisolver

1.4.2

launchpadlib

1.10.16

lazr.restfulclient

0.14.4

lazr.uri

1.0.6

MarkupSafe

2.0.1

matplotlib

3.5.2

matplotlib-inline

0.1.6

麦凯布

0.7.0

使走调

0.8.4

more-itertools

8.10.0

mypy-extensions

0.4.3

nbclient

0.5.13

nbconvert

6.4.4

nbformat

发送的

nest-asyncio

1.5.5

nodeenv

1.7.0

笔记本

6.4.12

numpy

1.21.5

oauthlib

3.2.0

包装

21.3

熊猫

1.4.4

pandocfilters

1.5.0

parso

0.8.3

pathspec

0.9.0

容易受骗的人

0.5.2

pexpect

4.8.0

pickleshare

0.7.5

枕头

9.2.0

皮普

22.2.2

bob体育客户端下载platformdirs

2.5.2

情节

5.9.0

pluggy

1.0.0

prometheus-client

0.14.1

prompt-toolkit

3.0.36

protobuf

3.19.4

psutil

5.9.0

psycopg2

2.9.3

ptyprocess

0.7.0

pure-eval

0.2.2

pyarrow

8.0.0

pycparser

2.21

pydantic

1.10.6

pyflakes

3.0.1

Pygments

2.11.2

PyGObject

3.42.1

PyJWT

tripwire

pyodbc

4.0.32

pyparsing

3.0.9

pyright

1.1.294

pyrsistent

0.18.0

python-dateutil

2.8.2

python-lsp-jsonrpc

1.0.0

python-lsp-server

1.7.1上

pytoolconfig

1.2.2

pytz

2022.1

pyzmq

23.2.0

请求

2.28.1

绳子

1.7.0

s3transfer

0.6.0

scikit-learn

1.1.1

scipy

1.9.1

seaborn

0.11.2

SecretStorage

3.3.1

Send2Trash

1.8.0

setuptools

63.4.1

六个

1.16.0

soupsieve

2.3.1

ssh-import-id

5.11

堆栈数据

0.6.2

statsmodels

0.13.2

韧性

8.1.0

terminado

0.13.1

testpath

0.6.0

threadpoolctl

2.2.0

tokenize-rt

4.2.1

tomli

2.0.1

龙卷风

6.1

traitlets

5.1.1

typing_extensions

4.3.0

ujson

5.4.0

unattended-upgrades

0.1

urllib3

1.26.11

virtualenv

20.16.3

wadllib

1.3.6

wcwidth

0.2.5

webencodings

0.5.1

whatthepatch

1.0.2中

0.37.1

widgetsnbextension

3.6.1

yapf

0.31.0

氧化锌碘仿糊

1.0.0

安装R库

R库的安装微软在2023-02-10凹口快照

图书馆

版本

图书馆

版本

图书馆

版本

箭头

10.0.1

askpass

1.1

为了

0.2.1

补丁

1.4.1

基地

4.2.2

base64enc

0.1 - 3

bit64

1.2.3

引导

-28 - 1.3

酿造

1.0 8

生动

1.1.3

扫帚

1.0.3

bslib

0.4.2

cachem

1.0.6

callr

3.7.3

脱字符号

-93 - 6.0

cellranger

1.1.0

时间

-59 - 2.3

-21 - 7.3

cli

3.6.0

clipr

0.8.0

时钟

0.6.1

集群

2.1.4

codetools

-19 - 0.2

色彩

2.1 0

commonmark

1.8.1

编译器

4.2.2

配置

0.3.1

cpp11

0.4.3

蜡笔

1.5.2

凭证

1.3.2

旋度

5.0.0

data.table

1.14.6

数据集

4.2.2

DBI

1.1.3

dbplyr

tripwire

desc

1.4.2

devtools

2.4.5

diffobj

0.3.5

消化

0.6.31

downlit

0.4.2

dplyr

1.1.0

dtplyr

1.2.2

e1071

-13 - 1.7

省略

0.3.2

评估

0.20

fansi

1.0.4

farver

2.1.1

fastmap

1.1.0

fontawesome

0.5.0

forcats

1.0.0

foreach

1.5.2

外国

-82 - 0.8

打造

0.2.0

fs

1.6.1

未来

1.31.0

future.apply

1.10.0

含漱剂

1.3.0

泛型

0.1.3

哥特

1.9.2

ggplot2

3.4.0

“大酒店”

1.3.1

gitcreds

0.1.2

glmnet

4.1 6

全局变量

0.16.2

胶水

1.6.2

googledrive

2.0.0

googlesheets4

1.0.1

高尔

1.0.1

图形

4.2.2

grDevices

4.2.2

网格

4.2.2

gridExtra

2.3

gsubfn

0.7

gtable

0.3.1

需要戴安全帽的

1.2.0

2.5.1

highr

0.10

hms

1.1.2

htmltools

0.5.4

htmlwidgets

1.6.1

httpuv

1.6.8

httr

1.4.4

id

1.0.1

ini

0.3.1

不小

-13 - 0.9

isoband

0.2.7

迭代器

1.0.14

jquerylib

0.1.4

jsonlite

1.8.4

KernSmooth

-20 - 2.23

knitr

1.42

标签

0.4.2

晚些时候

1.3.0

晶格

-45 - 0.20

熔岩

1.7.1上

生命周期

1.0.3

listenv

0.9.0

lubridate

1.9.1

magrittr

2.0.3

减价

1.5

质量

7.3 - -58.2

矩阵

1.5 - 1

memoise

2.0.1

方法

4.2.2

mgcv

-41 - 1.8

mime

0.12

miniUI

0.1.1.1

ModelMetrics

1.2.2.2

modelr

0.1.10

孟塞尔

0.5.0

nlme

-162 - 3.1

nnet

-18 - 7.3

numDeriv

2016.8 - -1.1

openssl

2.0.5

平行

4.2.2

平行

1.34.0

支柱

1.8.1

pkgbuild

1.4.0

pkgconfig

2.0.3

pkgdown

2.0.7

pkgload

1.3.2

plogr

0.2.0

plyr

1.8.8

赞美

1.0.0

prettyunits

1.1.1

pROC

1.18.0

processx

3.8.0

prodlim

2019.11.13

profvis

0.3.7

进步

1.2.2

progressr

0.13.0

承诺

1.2.0.1

原型

1.0.0

代理

-27 - 0.4

ps

1.7.2

purrr

1.0.1

r2d3

0.2.6虽然只是

R6

2.5.1

ragg

1.2.5

randomForest

4.7 - -1.1

rappdirs

0.3.3

rcmdcheck

1.4.0

RColorBrewer

1.1 - 3

Rcpp

1.0.10

RcppEigen

0.3.3.9.3

readr

2.1.3

readxl

1.4.2

食谱

1.0.4

复赛

1.0.1

rematch2

2.1.2

遥控器

2.4.2

reprex

2.0.2

reshape2

1.4.4

rlang

1.0.6

rmarkdown

2.20

RODBC

-20 - 1.3

roxygen2

7.2.3

rpart

4.1.19

rprojroot

2.0.3

Rserve

-12 - 1.8

RSQLite

2.2.20

rstudioapi

0.14

rversions

2.1.2

房车

1.0.3

萨斯

0.4.5

尺度

1.2.1 "

selectr

0.4 - 2

sessioninfo

1.2.2

形状

1.4.6

闪亮的

1.7.4

sourcetools

0.1.7-1

sparklyr

1.7.9

SparkR

3.4.0

空间

-15 - 7.3

样条函数

4.2.2

sqldf

-11 - 0.4

SQUAREM

2021.1

统计数据

4.2.2

stats4

4.2.2

stringi

1.7.12

stringr

1.5.0

生存

3.5 - 3

sys

3.4.1

systemfonts

1.0.4

tcltk

4.2.2

testthat

3.1.6

textshaping

0.3.6

宠物猫

3.1.8中

tidyr

1.3.0

tidyselect

1.2.0

tidyverse

1.3.2

timechange

0.2.0

timeDate

4022.108

tinytex

0.44

工具

4.2.2

tzdb

0.3.0

urlchecker

1.0.1

usethis

2.1.6

use utf8

1.2.3

跑龙套

4.2.2

uuid

1.1 0

vctrs

0.5.2

viridisLite

0.4.1

发呜呜声

1.6.1

沃尔多

0.4.0

晶须

0.4.1

withr

2.5.0

xfun

0.37

xml2

1.3.3

xopen

1.0.0

xtable

1.8 - 4

yaml

2.3.7

邮政编码

2.2.2

安装了Java和Scala库(Scala 2.12集群版)

组ID

工件ID

版本

antlr

antlr

2.7.7

com.amazonaws

amazon-kinesis-client

1.12.0

com.amazonaws

aws-java-sdk-autoscaling

1.12.390

com.amazonaws

aws-java-sdk-cloudformation

1.12.390

com.amazonaws

aws-java-sdk-cloudfront

1.12.390

com.amazonaws

aws-java-sdk-cloudhsm

1.12.390

com.amazonaws

aws-java-sdk-cloudsearch

1.12.390

com.amazonaws

aws-java-sdk-cloudtrail

1.12.390

com.amazonaws

aws-java-sdk-cloudwatch

1.12.390

com.amazonaws

aws-java-sdk-cloudwatchmetrics

1.12.390

com.amazonaws

aws-java-sdk-codedeploy

1.12.390

com.amazonaws

aws-java-sdk-cognitoidentity

1.12.390

com.amazonaws

aws-java-sdk-cognitosync

1.12.390

com.amazonaws

aws-java-sdk-config

1.12.390

com.amazonaws

aws-java-sdk-core

1.12.390

com.amazonaws

aws-java-sdk-datapipeline

1.12.390

com.amazonaws

aws-java-sdk-directconnect

1.12.390

com.amazonaws

aws-java-sdk-directory

1.12.390

com.amazonaws

aws-java-sdk-dynamodb

1.12.390

com.amazonaws

aws-java-sdk-ec2

1.12.390

com.amazonaws

aws-java-sdk-ecs

1.12.390

com.amazonaws

aws-java-sdk-efs

1.12.390

com.amazonaws

aws-java-sdk-elasticache

1.12.390

com.amazonaws

aws-java-sdk-elasticbeanstalk

1.12.390

com.amazonaws

aws-java-sdk-elasticloadbalancing

1.12.390

com.amazonaws

aws-java-sdk-elastictranscoder

1.12.390

com.amazonaws

aws-java-sdk-emr

1.12.390

com.amazonaws

aws-java-sdk-glacier

1.12.390

com.amazonaws

aws-java-sdk-glue

1.12.390

com.amazonaws

aws-java-sdk-iam

1.12.390

com.amazonaws

aws-java-sdk-importexport

1.12.390

com.amazonaws

aws-java-sdk-kinesis

1.12.390

com.amazonaws

aws-java-sdk-kms

1.12.390

com.amazonaws

aws-java-sdk-lambda

1.12.390

com.amazonaws

aws-java-sdk-logs

1.12.390

com.amazonaws

aws-java-sdk-machinelearning

1.12.390

com.amazonaws

aws-java-sdk-opsworks

1.12.390

com.amazonaws

aws-java-sdk-rds

1.12.390

com.amazonaws

aws-java-sdk-redshift

1.12.390

com.amazonaws

aws-java-sdk-route53

1.12.390

com.amazonaws

aws-java-sdk-s3

1.12.390

com.amazonaws

aws-java-sdk-ses

1.12.390

com.amazonaws

aws-java-sdk-simpledb

1.12.390

com.amazonaws

aws-java-sdk-simpleworkflow

1.12.390

com.amazonaws

aws-java-sdk-sns

1.12.390

com.amazonaws

aws-java-sdk-sqs

1.12.390

com.amazonaws

aws-java-sdk-ssm

1.12.390

com.amazonaws

aws-java-sdk-storagegateway

1.12.390

com.amazonaws

aws-java-sdk-sts

1.12.390

com.amazonaws

aws-java-sdk-support

1.12.390

com.amazonaws

aws-java-sdk-swf-libraries

1.11.22

com.amazonaws

aws-java-sdk-workspaces

1.12.390

com.amazonaws

jmespath-java

1.12.390

com.clearspring.analytics

2.9.6

com.databricks

Rserve

1.8 - 3

com.databricks

jets3t

0.7.1-0

com.databricks.scalapb

compilerplugin_2.12

0.4.15-10

com.databricks.scalapb

scalapb-runtime_2.12

0.4.15-10

com.esotericsoftware

kryo-shaded

4.0.2

com.esotericsoftware

minlog

1.3.0

com.fasterxml

同学

1.3.4

com.fasterxml.jackson.core

jackson-annotations

2.14.2

com.fasterxml.jackson.core

jackson-core

2.14.2

com.fasterxml.jackson.core

jackson-databind

2.14.2

com.fasterxml.jackson.dataformat

jackson-dataformat-cbor

2.14.2

com.fasterxml.jackson.datatype

jackson-datatype-joda

2.14.2

com.fasterxml.jackson.datatype

jackson-datatype-jsr310

2.13.4

com.fasterxml.jackson.module

jackson-module-paranamer

2.14.2

com.fasterxml.jackson.module

jackson-module-scala_2.12

2.14.2

com.github.ben-manes.caffeine

咖啡因

2.9.3

com.github.fommil

jniloader

1.1

com.github.fommil.netlib

native_ref-java

1.1

com.github.fommil.netlib

native_ref-java

1.1人

com.github.fommil.netlib

native_system-java

1.1

com.github.fommil.netlib

native_system-java

1.1人

com.github.fommil.netlib

netlib-native_ref-linux-x86_64

1.1人

com.github.fommil.netlib

netlib-native_system-linux-x86_64

1.1人

com.github.luben

zstd-jni

1.5.2-5

com.github.wendykierp

JTransforms

3.1

com.google.code.findbugs

jsr305

3.0.0

com.google.code.gson

gson

2.8.9

com.google.crypto.tink

叮叮铃

1.7.0

com.google.errorprone

error_prone_annotations

2.10.0

com.google.flatbuffers

flatbuffers-java

1.12.0

com.google.guava

番石榴

15.0

com.google.protobuf

protobuf-java

2.6.1

com.h2database

h2

2.1.214

com.helger

分析器

1.1.1

com.jcraft

jsch

0.1.55

com.jolbox

bonecp

0.8.0.RELEASE

com.lihaoyi

sourcecode_2.12

0.1.9

com.microsoft.azure

azure-data-lake-store-sdk

2.3.9

com.microsoft.sqlserver

mssql-jdbc

11.2.2.jre8

com.ning

compress-lzf

1.1.2

com.sun.mail

javax.mail

1.5.2

com.sun.xml.bind

jaxb-core

. 2.2.11

com.sun.xml.bind

jaxb-impl

. 2.2.11

com.tdunning

json

1.8

com.thoughtworks.paranamer

paranamer

2.8

com.trueaccord.lenses

lenses_2.12

0.4.12

com.twitter

chill-java

0.10.0

com.twitter

chill_2.12

0.10.0

com.twitter

util-app_2.12

7.1.0

com.twitter

util-core_2.12

7.1.0

com.twitter

util-function_2.12

7.1.0

com.twitter

util-jvm_2.12

7.1.0

com.twitter

util-lint_2.12

7.1.0

com.twitter

util-registry_2.12

7.1.0

com.twitter

util-stats_2.12

7.1.0

com.typesafe

配置

1.2.1 "

com.typesafe.scala-logging

scala-logging_2.12

3.7.2章

com.uber

h3

3.7.0

com.univocity

univocity-parsers

2.9.1

com.zaxxer

HikariCP

4.0.3

commons-cli

commons-cli

1.5.0

commons-codec

commons-codec

1.15

commons-collections

commons-collections

3.2.2

commons-dbcp

commons-dbcp

1.4

commons-fileupload

commons-fileupload

1.5

commons-httpclient

commons-httpclient

3.1

commons-io

commons-io

2.11.0

commons lang

commons lang

2.6

通用日志

通用日志

1.1.3

commons-pool

commons-pool

1.5.4

dev.ludovic.netlib

arpack

3.0.3

dev.ludovic.netlib

布拉斯特区

3.0.3

dev.ludovic.netlib

lapack

3.0.3

info.ganglia.gmetric4j

gmetric4j

1.0.10

io.airlift

aircompressor

0.21

io.delta

delta-sharing-spark_2.12

0.6.4

io.dropwizard.metrics

metrics-core

4.2.10

io.dropwizard.metrics

metrics-graphite

4.2.10

io.dropwizard.metrics

metrics-healthchecks

4.2.10

io.dropwizard.metrics

metrics-jetty9

4.2.10

io.dropwizard.metrics

metrics-jmx

4.2.10

io.dropwizard.metrics

metrics-json

4.2.10

io.dropwizard.metrics

metrics-jvm

4.2.10

io.dropwizard.metrics

metrics-servlets

4.2.10

io.netty

netty-all

4.1.87.Final

io.netty

netty-buffer

4.1.87.Final

io.netty

netty-codec

4.1.87.Final

io.netty

netty-codec-http

4.1.87.Final

io.netty

netty-codec-http2

4.1.87.Final

io.netty

netty-codec-socks

4.1.87.Final

io.netty

netty-common

4.1.87.Final

io.netty

netty-handler

4.1.87.Final

io.netty

netty-handler-proxy

4.1.87.Final

io.netty

netty-resolver

4.1.87.Final

io.netty

netty-transport

4.1.87.Final

io.netty

netty-transport-classes-epoll

4.1.87.Final

io.netty

netty-transport-classes-kqueue

4.1.87.Final

io.netty

netty-transport-native-epoll

4.1.87.Final

io.netty

netty-transport-native-epoll

4.1.87.Final-linux-aarch_64

io.netty

netty-transport-native-epoll

4.1.87.Final-linux-x86_64

io.netty

netty-transport-native-kqueue

4.1.87.Final-osx-aarch_64

io.netty

netty-transport-native-kqueue

4.1.87.Final-osx-x86_64

io.netty

netty-transport-native-unix-common

4.1.87.Final

io.prometheus

simpleclient

0.7.0

io.prometheus

simpleclient_common

0.7.0

io.prometheus

simpleclient_dropwizard

0.7.0

io.prometheus

simpleclient_pushgateway

0.7.0

io.prometheus

simpleclient_servlet

0.7.0

io.prometheus.jmx

收集器

0.12.0

jakarta.annotation

jakarta.annotation-api

1.3.5

jakarta.servlet

jakarta.servlet-api

4.0.3

jakarta.validation

jakarta.validation-api

2.0.2

jakarta.ws.rs

jakarta.ws.rs-api

2.1.6

javax.activation

激活

1.1.1

javax.el

javax.el-api

2.2.4

javax.jdo

jdo api

3.0.1

javax.transaction

jta

1.1

javax.transaction

事务api

1.1

javax.xml.bind

jaxb-api

. 2.2.11

javolution

javolution

5.5.1

jline

jline

2.14.6

joda-time

joda-time

2.12.1

ml.combust.mleap

mleap-databricks-runtime_2.12

v0.20.0-db2

net.java.dev.jna

jna

5.8.0

net.razorvine

泡菜

1.3

net.sf.jpam

jpam

1.1

net.sf.opencsv

opencsv

2.3

net.sf.supercsv

super-csv

2.2.0

net.snowflake

snowflake-ingest-sdk

0.9.6

net.snowflake

snowflake-jdbc

3.13.22

net.sourceforge.f2j

arpack_combined_all

0.1

org.acplt.remotetea

remotetea-oncrpc

1.1.2

org.antlr

ST4

4.0.4

org.antlr

antlr-runtime

3.5.2

org.antlr

antlr4-runtime

4.9.3

org.antlr

stringtemplate

3.2.1之上

org.apache.ant

蚂蚁

1.9.16

org.apache.ant

ant-jsch

1.9.16

org.apache.ant

ant-launcher

1.9.16

org.apache.arrow

arrow-format

11.0.0

org.apache.arrow

arrow-memory-core

11.0.0

org.apache.arrow

arrow-memory-netty

11.0.0

org.apache.arrow

arrow-vector

11.0.0

org.apache.avro

avro

1.11.1

org.apache.avro

avro-ipc

1.11.1

org.apache.avro

avro-mapred

1.11.1

org.apache.commons

commons-collections4

4.4

org.apache.commons

commons-compress

1.21

org.apache.commons

commons-crypto

1.1.0

org.apache.commons

commons-lang3

3.12.0

org.apache.commons

commons-math3

3.6.1

org.apache.commons

commons-text

1.10.0

org.apache.curator

curator-client

2.13.0

org.apache.curator

curator-framework

2.13.0

org.apache.curator

curator-recipes

2.13.0

org.apache.datasketches

datasketches-java

3.1.0

org.apache.datasketches

datasketches-memory

2.0.0

org.apache.derby

德比

10.14.2.0

org.apache.hadoop

hadoop-client-runtime

3.3.4

org.apache.hive

hive-beeline

2.3.9

org.apache.hive

hive-cli

2.3.9

org.apache.hive

hive-jdbc

2.3.9

org.apache.hive

hive-llap-client

2.3.9

org.apache.hive

hive-llap-common

2.3.9

org.apache.hive

hive-serde

2.3.9

org.apache.hive

hive-shims

2.3.9

org.apache.hive

hive-storage-api

2.8.1发布

org.apache.hive.shims

蜂巢0.23 -垫片

2.3.9

org.apache.hive.shims

hive-shims-common

2.3.9

org.apache.hive.shims

hive-shims-scheduler

2.3.9

org.apache.httpcomponents

httpclient

4.5.14

org.apache.httpcomponents

httpcore

4.4.16

org.apache.ivy

艾薇

2.5.1

org.apache.logging.log4j

log4j - 1.2 api

2.19.0

org.apache.logging.log4j

log4j api

2.19.0

org.apache.logging.log4j

log4j-core

2.19.0

org.apache.logging.log4j

log4j-slf4j2-impl

2.19.0

org.apache.mesos

便

1.11.0-shaded-protobuf

org.apache.orc

orc-core

1.8.3-shaded-protobuf

org.apache.orc

orc-mapreduce

1.8.3-shaded-protobuf

org.apache.orc

orc-shims

1.8.3

org.apache.thrift

libfb303

0.9.3

org.apache.thrift

libthrift

0.12.0

org.apache.xbean

xbean-asm9-shaded

4.22

org.apache.yetus

audience-annotations

0.13.0

org.apache.zookeeper

动物园管理员

3.6.3

org.apache.zookeeper

zookeeper-jute

3.6.3

org.checkerframework

checker-qual

3.19.0

org.codehaus.jackson

jackson-core-asl

1.9.13

org.codehaus.jackson

jackson-mapper-asl

1.9.13

org.codehaus.janino

commons-compiler

3.0.16

org.codehaus.janino

janino

3.0.16

org.datanucleus

datanucleus-api-jdo

4.2.4

org.datanucleus

datanucleus-core

4.1.17

org.datanucleus

datanucleus-rdbms

4.1.19

org.datanucleus

javax.jdo

3.2.0-m3

org.eclipse.jetty

jetty-client

9.4.50.v20221201

org.eclipse.jetty

jetty-continuation

9.4.50.v20221201

org.eclipse.jetty

jetty-http

9.4.50.v20221201

org.eclipse.jetty

jetty-io

9.4.50.v20221201

org.eclipse.jetty

jetty-jndi

9.4.50.v20221201

org.eclipse.jetty

jetty-plus

9.4.50.v20221201

org.eclipse.jetty

jetty-proxy

9.4.50.v20221201

org.eclipse.jetty

jetty-security

9.4.50.v20221201

org.eclipse.jetty

jetty服务器

9.4.50.v20221201

org.eclipse.jetty

jetty servlet

9.4.50.v20221201

org.eclipse.jetty

jetty-servlets

9.4.50.v20221201

org.eclipse.jetty

jetty-util

9.4.50.v20221201

org.eclipse.jetty

jetty-util-ajax

9.4.50.v20221201

org.eclipse.jetty

jetty-webapp

9.4.50.v20221201

org.eclipse.jetty

jetty-xml

9.4.50.v20221201

org.eclipse.jetty.websocket

websocket-api

9.4.50.v20221201

org.eclipse.jetty.websocket

websocket-client

9.4.50.v20221201

org.eclipse.jetty.websocket

websocket-common

9.4.50.v20221201

org.eclipse.jetty.websocket

websocket服务器

9.4.50.v20221201

org.eclipse.jetty.websocket

websocket-servlet

9.4.50.v20221201

org.fusesource.leveldbjni

leveldbjni-all

1.8

org.glassfish.hk2

hk2-api

2.6.1

org.glassfish.hk2

hk2-locator

2.6.1

org.glassfish.hk2

hk2-utils

2.6.1

org.glassfish.hk2

osgi-resource-locator

1.0.3

org.glassfish.hk2.external

aopalliance-repackaged

2.6.1

org.glassfish.hk2.external

jakarta.inject

2.6.1

org.glassfish.jersey.containers

jersey-container-servlet

2.36

org.glassfish.jersey.containers

jersey-container-servlet-core

2.36

org.glassfish.jersey.core

jersey客户端

2.36

org.glassfish.jersey.core

jersey-common

2.36

org.glassfish.jersey.core

jersey-server

2.36

org.glassfish.jersey.inject

jersey-hk2

2.36

org.hibernate.validator

hibernate验证框架

6.1.7.Final

org.javassist

javassist

3.25.0-GA

org.jboss.logging

jboss-logging

3.3.2.Final

org.jdbi

jdbi

2.63.1

org.jetbrains

注释

17.0.0

org.joda

joda-convert

1.7

org.jodd

jodd-core

3.5.2

org.json4s

json4s-ast_2.12

3.7.0-M11

org.json4s

json4s-core_2.12

3.7.0-M11

org.json4s

json4s-jackson_2.12

3.7.0-M11

org.json4s

json4s-scalap_2.12

3.7.0-M11

org.lz4

lz4-java

1.8.0

org.mariadb.jdbc

mariadb-java-client

第2.7.4

org.mlflow

mlflow-spark

2.2.0

org.objenesis

objenesis

2.5.1

org.postgresql

postgresql

42.3.8

org.roaringbitmap

RoaringBitmap

0.9.39

org.roaringbitmap

垫片

0.9.39

org.rocksdb

rocksdbjni

7.8.3

org.rosuda.REngine

REngine

魅惑

org.scala-lang

scala-compiler_2.12

2.12.15

org.scala-lang

scala-library_2.12

2.12.15

org.scala-lang

scala-reflect_2.12

2.12.15

org.scala-lang.modules

scala-collection-compat_2.12

2.4.3

org.scala-lang.modules

scala-parser-combinators_2.12

1.1.2

org.scala-lang.modules

scala-xml_2.12

1.2.0

org.scala-sbt

测试界面

1.0

org.scalacheck

scalacheck_2.12

1.14.2

org.scalactic

scalactic_2.12

3.2.15

org.scalanlp

breeze-macros_2.12

魅惑

org.scalanlp

breeze_2.12

魅惑

org.scalatest

scalatest-compatible

3.2.15

org.scalatest

scalatest-core_2.12

3.2.15

org.scalatest

scalatest-diagrams_2.12

3.2.15

org.scalatest

scalatest-featurespec_2.12

3.2.15

org.scalatest

scalatest-flatspec_2.12

3.2.15

org.scalatest

scalatest-freespec_2.12

3.2.15

org.scalatest

scalatest-funspec_2.12

3.2.15

org.scalatest

scalatest-funsuite_2.12

3.2.15

org.scalatest

scalatest-matchers-core_2.12

3.2.15

org.scalatest

scalatest-mustmatchers_2.12

3.2.15

org.scalatest

scalatest-propspec_2.12

3.2.15

org.scalatest

scalatest-refspec_2.12

3.2.15

org.scalatest

scalatest-shouldmatchers_2.12

3.2.15

org.scalatest

scalatest-wordspec_2.12

3.2.15

org.scalatest

scalatest_2.12

3.2.15

org.slf4j

jcl-over-slf4j

2.0.6

org.slf4j

jul-to-slf4j

2.0.6

org.slf4j

slf4j-api

2.0.6

org.threeten

threeten-extra

1.7.1上

org.tukaani

xz

1.9

org.typelevel

algebra_2.12

2.0.1

org.typelevel

cats-kernel_2.12

2.1.1

org.typelevel

spire-macros_2.12

0.17.0

org.typelevel

spire-bob体育客户端下载platform_2.12

0.17.0

org.typelevel

spire-util_2.12

0.17.0

org.typelevel

spire_2.12

0.17.0

org.wildfly.openssl

wildfly-openssl

1.1.3.Final

org.xerial

sqlite-jdbc

3.42.0.0

org.xerial.snappy

snappy-java

1.1.8.4

org.yaml

snakeyaml

1.33

奥罗

奥罗

2.0.8

pl.edu.icm

JLargeArrays

1.5

software.amazon.cryptools

AmazonCorrettoCryptoProvider

1.6.1-linux-x86_64

software.amazon.ion

ion-java

1.0.2中

stax

stax-api

1.0.1