海量日记数据检索ELK场景下Kafka磁盘故障时间解密
2025-01-24作家 | 移动云 kafka 团队李鸿鹏 背 景 本文记载了一个在海量日记检索 ELK 场景中,Filebeat 集聚日记写入到 Kafka 情势,Kafka 磁盘读写非常激勉的故障。其中 Kafka 集群内每个 Broker 节点都劝诱了两个 log 目次,每个目次单独挂载一块盘,当单块磁盘读写非常时,Filebeat 出现了写入 Kafka 抓续失败的问题。对 Kafka 来说,早有 KIP-112: Handle disk failure for JBOD 科罚访佛的问题,但为什么还会出