NYC's Blog - filebeat数据重复和截断及丢失问题分析的评论

NYC

NYC — Fri, 04 Jun 2021 13:38:18 +0800

这也不算是bug，最多是机制的缺陷（所以没有issue），所以Filebeat的官方文档里面也已经说了，而且通过合理的配置是完全可以避免的。就跟所有数据系统如果使用不当都可能会丢数据一样

lilimon — Fri, 04 Jun 2021 12:28:57 +0800

楼主用的是什么版本？github issue url在哪里？新版本会出现这样的问题吗？很多人应该会关心这个。

NYC — Wed, 13 May 2020 10:29:50 +0800

这样的确会有问题的，clean_inactive必须大于ignore_older + scan_frequency，所以filebeat启动的时候已经做了检查，如果这里配置错误，是无法启动的。

lukez — Sat, 09 May 2020 14:51:22 +0800

比如ignore_older参数比clean_inactive长..其中逻辑请参考官方文档

xiongjunkun — Tue, 17 Mar 2020 15:14:14 +0800

hi, 你好, 能够详细解释一下导致filebeat重传的第二种情况吗?