Storage日志持续执行相同的send snapshot

打开Storage日志,全是:Space 2 Part 54 start send snapshot of commitLogId 9874668 commitLogTerm 5, rate limited to 104857600, batch size is 10485760,而且日志内容全是这个,比如:
cat /home/logs/nebula/nebula-storaged.bjrw-sec-anti-fraud03.prod.bjrw.momo.com.root.log.INFO.20231212-075431.19132 |grep “Space 2 Part 54 start send snapshot of commitLogId 9874668 commitLogTerm 5, rate limited to 104857600, batch size is 10485760”|wc -l
4306458

可以发现,有400多万条,已经持续了24小时了。并且插入数据提示:Storage Error: Part 54 raft buffer is full. Please retry later.

看下磁盘的剩余空间呢。以及你 nebula 内核的版本号是多少?


/home 是日志目录
/data 是数据存放目录
版本是 3.6

现在集群无法插入数据,如何先快速恢复,让我先能插入数据了?

出现日志是因为有机器日志进度落后leader太多了(比如机器挂了一段时间) 只能通过拉快照的方式。当然出现那么多次是不正常的,先看看集群的机器是不是都活着。

此话题已在最后回复的 30 天后被自动关闭。不再允许新回复。