Flink Standalone集群模式安装部署全攻略
一、引言
Flink作为一款强大的分布式流处理和批处理框架,在大数据领域有着广泛的应用。本文将详细介绍Flink Standalone集群模式的安装部署过程,帮助大家快速搭建起开发测试环境。
二、安装前准备
首先,确保已经安装好了Hadoop环境(因为后续配置中涉及到与Hadoop的集成)。
三、安装步骤
(一)环境准备
- 退出conda的base环境(如果存在):
conda deactivate
- 下载Flink安装包:
下载链接为:https://archive.apache.org/dist/flink/flink-1.13.1/flink-1.13.1-bin-scala_2.11.tgz
(二)安装包处理
- 上传Flink安装包到服务器后,进行解压操作:
[root@hadoop11 modules]# tar -zxf flink-1.13.6-bin-scala_2.11.tgz -C /opt/installs/ [root@hadoop11 installs]# mv flink-1.13.6/ flink
- 配置环境变量:
编辑/etc/profile
文件,添加以下内容:
记得执行export FLINK_HOME=/opt/installs/flink export PATH=$PATH:$FLINK_HOME/bin export HADOOP_CONF_DIR=/opt/installs/hadoop/etc/hadoop