Spark Writer配置建议

利用Spark进行数据导入前,要进行application.conf的配置。

  1. 建议丰富配置文件的注释说明,全部配置给出,但存在默认值的配置项可注释掉并给出说明,比如spark相关的配置。
  2. 对于tags和edges的字段映射配置,关于fields配置项,是否可增加源数据字段和nebula图中属性字段的同名映射配置?当有tag或者edge有50+属性时,采用同名映射就可以减少很多fields的配置。
2 个赞

是的,我目前就需要相关的配置文件指导手册,需知道最佳性能配置以及配置方法