logging.files:定义Filebeat日志文件的存储路径和文件名.Filebeat可yi将日志数据发送到不同的存储目的地,如Elasticsearch、 Logstash、Kafka等.比方说:logging.files: path: /var/log/filebeat/filebeat.log name: filebeat keepfiles: 7.，客观地说...

Filebeat 在 CentOS 的日志存储策略——策略总览

事实上... 先说说我们需要将策略分为两层：一是Filebeat自身的运行日志，二是系统的其他日志。

Filebeat 自身运行日志的管理，通常由 Filebeat 配置或系统的其他组件来处理。

一、 Filebeat 自身运行日志

使用 Filebeat 内置日志到文件功Neng，在 /etc/filebeat/filebeat.yml 中开启文件日志并设置保留：

logging:
  level: info
  to_files: true
  files:
    path: /var/log/filebeat
    name: filebeat
    keepfiles: 7

二、采集端对应用日志的留存与清理

编辑 filebeat.yml 配置文件，指定需要备份的日志文件路径。

setup.template.name: my-template
setup.template.pattern: my-*
output.elasticsearch.hosts:
  - output_to_logstash: true

三、 系统级 logrotate 对 Filebeat 自身日志的轮转

我开心到飞起。 创建或编辑 logrotate 配置文件，比方说 filebeat。

/var/log/filebeat/*.log {
    daily
    missingok
    rotate 7
    compress
    notifempty
    create 0640 root root
    postrotate
        # 通知 Filebeat 重新打开日志文件
        kill -USR1 $
    endscript}

四、 输出侧存储控制

tong过索引生命周期或脚本删除，可避免后端存储无限增长，本质上...。

KEEP_DAYS=7
for day in $))
do
  DATE=$) day ago" +%Y.%m.%d)
  curl -XDELETE "http://127.0.0.1:9200/filebeat-7.17.0-$DATE"
done

tong过以上配置， 我们可yi有效地管理 Filebeat 在 CentOS 上的日志存储策略，提升日志管理效率，交学费了。。