Flume1.9.0配置.docx
需积分: 5 66 浏览量
2022-09-14
17:02:32
上传
评论
收藏 18KB DOCX 举报
一、解压
cd /usr/local/soft
tar -zxvf apache-flume-1.9.0-bin.tar.gz
二、添加系统环境变量(需配置 Java JDK 系统参数)
vi /etc/profile
export FLUME_HOME=/usr/local/soft/apache-flume-1.9.0-bin
export PATH=$PATH:$FLUME_HOME/bin
source /etc/profile
三、修改 Flume 环境变量
cd /usr/local/soft/apache-flume-1.9.0-bin/conf/
拷贝环境变量文件
cp flume-env.sh.template flume-env.sh
添加内容
export JAVA_HOME=/usr/local/soft/jdk1.8.0_11
四、配置文件
客户端(Source)：收集信息
拷贝配置文件：
cp flume-conf.properties.template flume-client.properties
配置文件内容：
#分别指定 agent 的 sources，sinks, channels 的名称 名称可以自定义
a1.sources = s1
a1.sinks = k1
a1.channels = c1
#配置目录 scource
a1.sources.s1.type =spooldir
a1.sources.s1.spoolDir =/home/hadoop/logs
a1.sources.s1.fileHeader= true
a1.sources.s1.channels =c1
#配置 sink
a1.sinks.k1.type = logger
a1.sinks.k1.channel = c1
#配置 channel(内存做缓存)
a1.channels.c1.type = memory
五、启动
flume-ng agent -n a1 -c conf -f flume-client.properties
-Dflume.root.logger=DEBUG,console
其中：
-n:agent 名称
资源评论
