Q: 生产过程中发现zk机器磁盘多次报警, zk日志与快照占用存储较多
A: 设置日志与快照份数以及自动清理的频率, 合理利用磁盘使用率
Q: 分布式表写入时会进行分片计算与数据分发,导致cpu与内存飙升,报错:Merges are processing significantly slower than inserts,merges速度跟不上写入速度
A: 写local表,同时使用vip写入 , 尽量保持数据写入磁盘均匀分布;
Q: zk session经常断掉,或者处理不过来事务,导致ck所有表结构出现readonly;
A: 高版本clickhouse集群支持raftKeeper, 在一定程度上解决zookeeper性能问题, 目前正在持续调研跟进中
五、未来展望总结起来, clickhouse在大批量数据读写场景下对比同类型引擎有着巨大的性能优势, 在风险洞察实时分析、实时预警领域承担着重要职责; 同时我们也在对clickhouse不断地深挖优化, 针对高并发, zookeeper集群不稳定等ck劣势方面进行采取集群拆分、优化SQL来提高查询并发能力, 后续也将推进升级版本支持RaftKeeper等措施来完善clickhouse的不足之处.
【clickhouse在风控-风险洞察领域的探索与实践】
推荐阅读
- 2022光遇天空王国在什么地方
- iphone12录屏在哪里_iphone12录屏功能在哪儿
- 光遇破晓季霞谷黑暗碎片红石位置在哪
- iphone13最严重的缺点_iphone13缺点汇总
- 荣耀60桌面天气怎么设置
- 天涯明月刀捏脸数据放在哪,捏脸导出到哪个文件夹
- 逆水寒怎么捏脸怎么导入捏脸数据(逆水寒捏脸在哪保存)
- 天涯明月刀捏脸数据怎么导入天涯明月刀捏脸数据在哪
- 「Python实用秘技11」在Python中利用ItsDangerous快捷实现数据加密
- 光遇破晓季禁阁暗黑碎片红石位置在什么地方