一个使用场景

您好,
我们打算用exchange定时将亿级从hive使用exchange生成sst文件,然后导入数据库覆盖,最后查询,这样可以么,效率比使用loader工具导入如何?

我试了下,,sst导入成功没有报任何错误,怎么数据查询不到呢

  1. 你说的loader工具是指?
  2. 利用exchange将hive数据读出生成sst文件导入数据库,这样是可以的
  3. 你用的nebula服务和exchange版本分别是什么
  4. sst导入成功是指哪些步骤? download 成功了吗,ingest成功了吗, 所有的storage 机器都安装hadoop客户端了吗 ? 数据查不到用statis进行统计看有没有值

image
就是exchange工具,使用的3.2.0版本, download ,ingest都成功了 所有的storage 机器都安装hadoop客户端了,结果如上图,节点个数是对的,但是没有对应到Tag上面

你在exchang的配置文件中 把 repartitionWithNebula 设置成true,再重新导入一下。

1 个赞

可以了。。谢谢。。

浙ICP备20010487号