Nebula Graph2.0GA单机版运行GraphX问题

nicole · 2021 年4 月 7 日 08:08

SparkConnector中没有定义createDataReaderFactories方法，你使用的Spark是什么版本的，我们要求必须是2.3 以上版本。

zhaochuanyun · 2021 年4 月 7 日 08:25

我是参考的https://github.com/vesoft-inc/nebula-spark-utils的example，master和v2.0.0分支的代码都试了，同样的错误，spark版本2.4.4。

nicole · 2021 年4 月 7 日 08:45

我这边执行去执行Exchange的reader可以读到数据

你用StorageClient读没问题，应该是你的Spark相关的jar存在包冲突，你看下执行程序的机器上是否有2.2版本的Spark，你的Spark-connector包是怎么来的，是在远程maven库下载的还是最新的master编译的？
我怀疑你的环境中使用的包有问题，你清理下环境。 wget下载maven上的jar包：
wget https://repo1.maven.org/maven2/com/vesoft/nebula-spark-connector/2.0.0/nebula-spark-connector-2.0.0.jar

zhaochuanyun · 2021 年4 月 7 日 08:54

Spark-connector包是最新的master编译的。

ch0shim · 2021 年4 月 7 日 10:01

这个问题我遇见过是spark版本的问题

zhaochuanyun · 2021 年4 月 7 日 10:31

哦，你用的哪个版本啊？

ch0shim · 2021 年4 月 8 日 01:59

2.4.3

donghuayanyun · 2021 年8 月 25 日 05:46

windows本地spark改成了2.4.7还是不行呢，已经修改了配置了local-ip和meta_server_addrs，scala版本是2.11.12

nicole · 2021 年8 月 25 日 05:52

大于2.2小于3