平台组件安装

Flume 安装

  1. 解压

    [root@master h3cu]# tar -zxvf apache-flume-1.6.0-bin.tar.gz -C /usr/src/
    [root@master src]# mv apache-flume-1.6.0-bin flume  
  1. 安装jdk1.8

这里使用之前1_hadoop 安装中的jdk 1.8

  1. 修改Flume配置文件

    [root@master src]# cd /usr/src/flume/conf
    [root@master conf]# cp flume-conf.properties.template flume.conf
    agent.sources.seqGensrc.spoolDir = /home/hadoop/log 
    agent.channels.memoryChannel.capacity = 1000
    agent.channels.memoryChannel.transactionCapacity = 100 
    # 增加或修改如上属性
    [root@master conf]# vi flume-env.sh
    export JAVA_HOME=/usr/local/src/jdk1.8.0_144
  1. 修改环境变量

    [root@master flume]# vi /etc/profile
    export FLUME_HOME=/usr/src/flume                                                
    export PATH=$PATH:$FLUME_HOME/bin
    [root@master flume]# source /etc/profile
  1. 启动

    bin/flume-ng agent --conf conf --conf-file conf/flume.conf --name a1 -Dflume.root.logger=INFO,console