大数据处理工具——Flume安装及使用

【大数据处理工具1——Flume安装及使用

序言：近期正在开发一个商业数据分析系统，过程中涉及多种工具的运用，现将实际操作过程进行整理记录。

flume-1.7.0 + Ubuntu 14.04.1 LTS + java-7-openjdk-amd64 + hadoop-2.6.0

一、下载与解压操作

访问官方网站：http://flume.apache.org/

在页面中找到Download选项，选择 apache-flume-1.7.0-bin.tar.gz 文件进行下载（注意避免误选源代码版本）。

完成下载后，执行解压命令：tar -zxvf apache-flume-1.7.0-bin.tar.gz

二、Java运行环境配置

1. 进入Flume解压后的主目录；
2. 对 flume-env.sh 配置文件进行编辑，重点设置JAVA_HOME环境变量。

cp conf/flume-env.sh.template conf/flume-env.sh

vim conf/flume-env.sh

在文件末尾添加：JAVA_HOME=/usr/lib/jvm/java-7-oracle（此处为当前系统中Java的安装路径）

三、编写配置文件