进程卡了,重启一下服务
谢谢分享!!
新版的region大小设置的更大了,是不是就是为了解决这类region过多的问题?
raft有审计记录吗
region过多导致raft store进程不够用了?
网络有没有延迟?
网络延迟或不稳定可能导致 region meta 信息更新缓慢
网络问题可能导致 PD 和 TiKV 之间通信延迟,从而影响 Region meta 的更新
Region 信息不更新也可能是因为某些 TiKV 节点出现问题。使用 tiup 或 tikv-ctl 检查 TiKV 节点的状态
PD 参数规格不匹配海量 Region
最近遇到了类似的问题。排查发现是PD处理region心跳的能力跟不上所致(大量region心跳会引起pd的RegionTree结构锁竞争,这是一个同步堵点),可以考虑升级到8版本,提高磁盘性能,或者提高心跳间隔(若调短过)
如果集群的负载不均衡,某些节点可能因为负载过高而无法及时响应 PD 的请求,导致 region 信息更新缓慢。
查看 PD 日志排查报错,检测 TiKV 与 PD 的网络连通性,并监控 PD 节点 CPU 负载。
region过多导致的吗
集群region 数量过多,PD 频繁出现get timestamp too slow告警,Raft 消息量暴涨,通信链路阻塞,并非 PD/TiKV CPU 性能瓶颈。
临时方案:故障时切换 PD leader 可临时恢复。
初步判断是因为集群REGION数量过多导致的PD瓶颈.
160万region对5.0的pd偏重,查pd心跳队列是否积压
这种region过多带来的PD瓶颈,升级版本有优化效果吗