Flume教程（一）Flume环境搭建与测试、使用

159 阅读 0 评论 105 点赞

我是靠谱客的博主唠叨鸭子，这篇文章主要介绍Flume教程（一）Flume环境搭建与测试、使用，现在分享给大家，希望可以做个参考。

安装

一、将apache-flume-1.9.0-bin.tar.gz上传到hp3的/apps文件夹下
二、解压：
tar -xvf /apps/apache-flume-1.9.0-bin.tar.gz -C /usr/local
三、对解压后的文件建立一个软连接，命名为flume
四、配置环境变量，在profile.d下新建flume.sh
编辑内容为：

复制代码

1
2
3
export FLUME_HOME=/usr/local/flume
export PATH=$PATH:$FLUME_HOME/bin

并让其生效：

复制代码

1
2
source /etc/profile.d/flume

五、检查

复制代码

1
2
flume-ng version

在这里插入图片描述

使用

监听端口，获取网络发来的请求，并将数据打印在控制台上：
在flume目录下，新建一个job文件夹，在job文件夹中新建：

复制代码

1
2
vi flume-nc-log.conf

编辑内容为：

复制代码

1
2
3
4
5
6
7
8
9
10
11
12
# Describe the sink
a1.sinks.k1.type = logger

# Use a channel which buffers events in memory
a1.channels.c1.type = memory
a1.channels.c1.capacity = 1000
a1.channels.c1.transactionCapacity = 100

# Bind the source and sink to the channel
a1.sources.r1.channels = c1
a1.sinks.k1.channel = c1

开启Fulme监听：

复制代码

1
2
 flume-ng agent --conf conf --name a1 --conf-file /usr/local/flume/job/flume-nc-log.conf -Dflume.root.logger=INFO,console

再开启一个Linux终端，使用NetCat往44444端口发送消息：
在这里插入图片描述
查看开启flume监听的终端在控制台上打印的信息：

最后

以上就是唠叨鸭子最近收集整理的关于Flume教程（一）Flume环境搭建与测试、使用的全部内容，更多相关Flume教程（一）Flume环境搭建与测试、使用内容请搜索靠谱客的其他文章。

本图文内容来源于网友提供，作为学习参考使用，或来自网络收集整理，版权属于原作者所有。

本文分类：Flume
浏览次数：159 次浏览
发布日期：2023-12-13 01:35:21
本文链接：https://www.kaopuke.com/article/k-p-k_13_u_23_o_6_f4_12__23_ky.html

Flume教程（一）Flume环境搭建与测试、使用

安装

使用

最后

评论列表共有 0 条评论

发表评论取消回复

Flume教程（一）Flume环境搭建与测试、使用

安装

使用

最后

微信扫一扫：分享

相关文章

评论列表共有 0 条评论

发表评论 取消回复

微信扫一扫：分享

发表评论取消回复