Linux下如何安装日志收集系统flume

flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统，在实际开发环境中被广泛使用。

环境说明:

操作系统:CentOS6.9 64位

解压：

tar -xzvf apache-flume-1.7.0-bin.tar.gz

创建软链接：

ln -s /opt/modules/apache-flume-1.6.0-cdh6.9.3-bin/ /opt/shortcut/flume

这里不再添加环境变量

修改flume-env.sh配置文件：

# 先修改名字mv flume-env.sh.template flume-env.shvim flume-env.sh# 添加JAVA_HOMEexport JAVA_HOME=/usr/java/default

创建一个配置文件，这里使用官网给的一个例子

vim test.conf# 内容如下：# example.conf: A single-node Flume configuration# Name the components on this agent# 定义一个 agent 的元素a1.sources = r1a1.sinks = k1a1.channels = c1# Describe/configure the source# 配置 sourcea1.sources.r1.type = netcata1.sources.r1.bind = localhosta1.sources.r1.port = 44444# Describe the sink# 配置 sinka1.sinks.k1.type = logger# Use a channel which buffers events in memory# 定义 channela1.channels.c1.type = memorya1.channels.c1.capacity = 1000a1.channels.c1.transactionCapacity = 100# Bind the source and sink to the channel# 用 channel 连接起来 source 和 sinka1.sources.r1.channels = c1a1.sinks.k1.channel = c1

安装telnet:

yum install telnetyum install telnet-serveryum install xinetd

重启telnet:

service xinetd restart

启动flume：

bin/flume-ng agent --conf conf --conf-file conf/test.conf --name a1 -Dflume.root.logger=INFO,console

启动telnet：

telnet localhost 44444

在telnet里输入内容：

在Flume进而查看是否接收到：

会看到这样的内容，可能有时候这一行显示的内容比我们输入的内容要少，并不是没有接收到，而是因为超过了它能显示的长度，给省略掉了