Filebeat

Filebeat是用于轉(zhuǎn)發(fā)和集中日志數(shù)據(jù)的輕量級傳輸程序。Filebeat可以監(jiān)聽指定的日志文件或位置，從中收集日志事件并將其轉(zhuǎn)發(fā)到Elasticsearch或Logstash進行索引。Filebeat的工作原理如下：

1. Filebeat啟動一個或多個Input，Input在指定的位置中查找日志數(shù)據(jù)。
2. Filebeat為每個找到的日志啟動Harvester，Harvester讀取日志并將日志數(shù)據(jù)發(fā)送到libbeat。
3. libbeat聚集數(shù)據(jù)，然后將聚集的數(shù)據(jù)發(fā)送到配置的Output。

接入優(yōu)勢

云消息隊列 Kafka 版接入Filebeat可以帶來以下優(yōu)勢：

• 異步處理：防止突發(fā)流量。
• 應用解耦：當下游異常時，不會影響上游工作。
• 減少開銷：減少Filebeat的資源開銷。

接入方案

云消息隊列 Kafka 版支持以下方式接入Filebeat：

• VPC
  • 作為Input接入
  • 作為Output接入
• 公網(wǎng)
  • 作為Input接入
  • 作為Output接入