Star

INGEST导入无响应的问题

版本1.1.0,通过sst的方式导入边

首先执行 download
文件下载成功,文件位置在/data/storage/nebula/20/download/general
可以看到全部文件下载成功,文件夹大小也符合预期(原始数据的3倍大)
文件命名如下(只截取了部分)
105-2600.sst 105-2605.sst 105-2610.sst 105-2615.sst 105-2620.sst

然后执行INGEST,瞬间得到返回,返回内容如下

(x@x) [xxx]> INGEST   
Execution succeeded (Time spent: 67.139/67.489 ms)

好像啥也没发生,sst文件也都还在download里,然后通过go语句查询也查不到。
storage日志中有如下内容

E1203 17:20:16.038718 30478 StorageHttpIngestHandler.cpp:75] SSTFile ingest successfully

麻烦问下以下几个问题
1.如何才能ingest成功?
2.成功后数据文件会挪到data文件下吗?
3.download文件夹会自动删除吗?
4.如果要ingest多个点和边的话,正确流程应该是什么?

谢谢

2.成功后会move走,不过你可以检查data目录下的文件大小是否符合预期。
3.download文件目前不会自动删除,在下一次download时会先清空。
4.
download tag <tag> hdfs ‘<path>’
ingest tag <tag>

2赞

昨天 @xuguruogu 老哥帮我解决了这个问题~ 感谢~
问题定位在GraphPrefixTransform上,我把prefix bloom filter关闭之后就一切正常了
另外之前


这个帖子之前提到过一次数据幽灵消失,然后日志也并没有报错。也许也跟这个有关~ @min.wu 老哥可以找人确认下~

浙ICP备20010487号