大数据ELK（十八）：Beats 简单介绍和FileBeat工作原理

beats概述及filebeat工作原理

一、Beats概述

Beats是一款开源数据传输工具。我们可以将其作为代理安装在服务器上，从而便捷地将数据发送至Elasticsearch或Logstash。Elastic Stack提供了多种Beats组件。

数据类型	Beats组件
审计数据	AuditBeat
日志文件	FileBeat
云数据	FunctionBeat
可用性数据	HeartBeat
系统日志	JournalBeat
指标数据	MetricBeat
网络流量数据	PacketBeat
Windows事件日志	Winlogbeat

Beats可以直接将数据发送到Elasticsearch，也可以发送到Logstash，Logstash可以进一步处理数据，然后将处理后的数据存储到Elasticsearch，最后使用Kibana进行数据可视化。

二、FileBeat简介

FileBeat是一个专用于转发和收集日志数据的轻量级工具。它可以作为代理安装在服务器上，监控指定路径的日志文件，收集日志数据，并将收集到的日志转发到Elasticsearch或Logstash。

三、FileBeat的工作原理

钉钉 AI 助理

钉钉AI助理汇集了钉钉AI产品能力，帮助企业迈入智能新时代。

204 查看详情

启动FileBeat时，会启动一个或多个输入（Input），这些输入监控指定的日志数据位置。FileBeat会为每个文件启动一个Harvester（收割机）。Harvester读取每个文件的日志，将新的日志发送到libbeat，libbeat将数据收集到一起，并将数据发送给输出（Output）。

四、安装FileBeat

安装FileBeat只需将FileBeat的Linux安装包上传到Linux系统，并解压缩到系统即可。FileBeat的官方下载地址为：Filebeat 7.6.1 | Elastic

将FileBeat安装包上传到Linux，并进行解压。

tar -xvzf filebeat-7.6.1-linux-x86_64.tar.gz

以上就是大数据ELK（十八）：Beats 简单介绍和FileBeat工作原理的详细内容，更多请关注其它相关文章！