-
Filebeat + Elasticsearch Ingest Node :
原因：Filebeat 缺乏数据转换的能力
Elasticsearch Ingest Node ：
新增的node类型；
在数据写入es前对数据进行处理转换
pipeline api
查看全部 -
filebeat filter 的处理能力
input 时处理
include_lines : 达到某些条件的时候，读入这一行
exclude_lines ：达到某些条件的时候，不读入这一行
exclude_files：当文件名符合某些条件的时候，不读取这个文件
output 前处理 --Processor
drop_event ：读取到某一条，满足了某个条件，不输出
drop_fields ：读取到某一条，满足了某个条件，不输出这个字段
Decode_json_fields ：把这条数据里面符合json格式的字段，去做json的解析
Include_fields ：加入一些字段，或者是只想取数据里面的某一些字段
查看全部 -
filebeat output 配置
有哪些output 对象？
console ：标准输出 ；
elasticsearch
logstash
kafka
redis
file --把一个日志文件输出到另一个日志文件中
查看全部 -
Filebeat 配置简介
input 配置
yaml语法
filebeat 其中的一个组成是 ：prospector ；在配置文件里就会有一个 prospectors的配置文件，而且 filebeat 不止有一个 prospector ，可以有多个；在yaml语法里，数组的形式是由 “-”来实现的 。
每一个prospector 都有一个输入的类型 input_type ；他目前有两个类型 log 和stdin(标准输入---标准输入把日志文件传给filebeat，然后进行处理) ；
log 下会有一个 paths ,他也是一个数组的形式，所以也需要 ”-”来实现。
查看全部 -
Elasticsearch 配置说明
查看全部 -
用例查看post
查看全部 -
ES常用术语
查看全部 -
elasticsearch.yml重要配置
查看全部 -
_cat/indices
查看全部 -
抓包截图！
查看全部 -
https://www.alibabacloud.com/help/zh/doc-detail/64803.htm
查看全部 -
output
查看全部 -
FIleBeats
查看全部 -
Beats
查看全部 -
处理流程input和output
查看全部
举报