博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
filbeat遇到的坑(运行久和文件数据量多时候 )
阅读量:4486 次
发布时间:2019-06-08

本文共 394 字,大约阅读时间需要 1 分钟。

1、现像,吃cpu,&& io

 

 

过程:量大的时候发现在filbeat很吃io,

 

原因:

日志量文件数太多,因为日志是2m一个文件 ,一天几十个G

 

开始怀疑是centos  6的问题,,后面观察下来7也有这个问题,filebeat运行久和文件数据量多时候 

 

所以会导致 filbeat 数据文件 registry    io  吃很多   发现这个文件 有6m左右 

 

 1、忧化配置

配置参数:

close_inactive: 5m

close_removed: true
clean_removed: true
max_procs: 1
scan_frequency: 120s

 

2、要求开发统一打200m一个大小的文件 ,禁止打小文件 

 

3、每天压缩一次这个log文件 

 

观察几天下来,filebeat正常

 

转载于:https://www.cnblogs.com/Qing-840/p/9983176.html

你可能感兴趣的文章
Pascal程序练习-与7无关的数
查看>>
会了这十种Python优雅的写法,让你工作效率翻十倍,一人顶十人用!
查看>>
2013年终总结
查看>>
Windows Store App之数据存储
查看>>
Redis与Python交互
查看>>
Maximum-SubsequenceSum
查看>>
python接口自动化测试二十五:执行所有用例,并生成HTML测试报告
查看>>
c# 指定的存储区提供程序在配置中找不到,或者无效
查看>>
第1周小组博客作业--1703班06组
查看>>
C语言指针
查看>>
Java的安装
查看>>
0920 JSON数据 蓝懿
查看>>
Azure Cosmos DB 使用费用参考
查看>>
C# 子线程与主线程通讯方法一
查看>>
谷歌搜索语法
查看>>
static 静态变量
查看>>
Docker 安装及问题处理
查看>>
匿名内部类
查看>>
BZOJ4071: [APIO2015]八邻旁之桥
查看>>
Redis的六种特性 场景
查看>>