2022年10月26日更新deepak.bhutada
使用在火花datetime值3.0及以上
问题你从支持集群运行数据砖运行时迁移工作6.6和Apache火花2.4.5低于低于砖集群运行当前版本的运行时。如果你的工作和/或笔记本电脑日期转换过程,他们可能会失败SparkUpgradeException错误消息后运行在集群升级……
1分钟的阅读时间
2023年7月28日更新deepak.bhutada
发现错误块创建一个三角洲表复制列
问题与一个或多个结构体数组列DataFrame重复的列名。如果你想创建一个增量表你有发现重复的列(s)在数据保存:错误。示例代码可以复制这个示例代码的错误。1)第一步设置一个数组与重复的列名。重复的列…
1分钟的阅读时间
2022年10月14日更新deepak.bhutada
不同与相同的数据表用于相同查询时产生不同的计划
问题,假设您有两个三角洲表test_table_1 test_table_2。两个表有相同的模式,同样的数据量,相同的分区,并包含相同数量的文件。你在做一个连接转换与另一个δ表,test_table_join,一百万条记录。当您运行下面的连接查询使用test_table_1和test_……
1分钟的阅读时间
加载更多