栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 软件开发 > 后端开发 > Java

Flume配置

Java 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

Flume配置

一、解压
cd /usr/local/softtar -zxvf apache-flume-1.9.0-bin.tar.gz二、添加系统环境变量(需配置Java JDK系统参数)vi/etc/profileexport FLUME_HOME=/usr/local/soft/apache-flume-1.9.0-binexport PATH= P A T H : PATH: PATH:FLUME_HOME/binsource /etc/profile三、修改Flume环境变量cd /usr/local/soft/apache-flume-1.9.0-bin/conf/拷贝环境变量文件cp flume-env.sh.template flume-env.sh添加内容export JAVA_HOME=/usr/local/soft/jdk1.8.0_11四、配置文件客户端(Source):收集信息拷贝配置文件:cp flume-conf.properties.template flume-client.properties配置文件内容:#分别指定agent的sources, sinks,channels的名称 名称可以自定义a1.sources= s1a1.sinks =k1a1.channels= c1#配置目录scourcea1.sources.s1.type =spooldira1.sources.s1.spoolDir=/home/hadoop/logsa1.sources.s1.fileHeader=truea1.sources.s1.channels =c1#配置sinka1.sinks.k1.type = loggera1.sinks.k1.channel = c1#配置channel(内存做缓存)a1.channels.c1.type =memory五、启动flume-ng agent -n a1 -c conf -f flume-client.properties -Dflume.root.logger=DEBUG, console其中:-n:agent名称-c:配置文件路径conf-f:配置文件名称
附:集群拷贝
scp -r /usr/local/soft/apache-flume-1.9.0-bin root@slave1:/usr/local/soft
scp -r /usr/local/soft/apache-flume-1.9.0-bin root@slave2:/usr/local/soft

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/658893.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号