exchange 写sst的性能问题

你可以不用repartitionWithNebula这个配置,最后写sst文件的并发数就是你所配置的shuffle partitions的值。 但这样会生成很多个sst文件,写文件性能上去了,但后面还有download和ingest的操作,这两个操作会因为sst文件数多而速度慢。

1 个赞