我知道你为啥不生效了, 配置是:
--conf spark.sql.shuffle.partitions=200
注意partition后面有个s。 你的命令中这个配置少了个s。
我知道你为啥不生效了, 配置是:
--conf spark.sql.shuffle.partitions=200
注意partition后面有个s。 你的命令中这个配置少了个s。
收到,大神,已经成功了,现在一个小时可以生成SST了。
如果你觉得上面 Nicole 的回复解决了你的问题,可以勾选对应的回复为解决方案,方便后续遇到相似问题的小伙伴可以快速找到解决方法。