首页 > 其他 > 详细

Flink1.7.2环境搭建

时间:2019-11-05 22:45:44      阅读:159      评论:0      收藏:0      [点我收藏+]

这里虚拟机模拟三台机器,分别为node01,node02,node03

搭建计划  Flink Yarn HA模式

node01: JM+TM

node02:JM+TM  --备用节点

node03:TM

1.上传解压

2.flink下创建目录tem

3.修改配置文件

  3.1conf/flink-conf.yaml

  

 1 jobmanager.rpc.address: node01
 2 jobmanager.rpc.port: 6123
 3 jobmanager.heap.mb: 1024
 4 taskmanager.heap.mb: 1024
 5 taskmanager.numberOfTaskSlots: 2
 6 taskmanager.memory.preallocate: false
 7 parallelism.default: 1
 8 jobmanager.web.port: 8081
 9 taskmanager.tmp.dirs: /export/servers/flink-1.7.2/tmp
10 #开启HA
11 state.backend: filesystem
12 state.backend.fs.checkpointdir: hdfs://node01:8020/flink-checkpoints
13 high-availability: zookeeper
14 high-availability.storageDir: hdfs://node01:8020/flink/ha/
15 high-availability.zookeeper.quorum: node01:2181,node02:2181,node03:2181

  3.2修改conf/masters

node01:8081
node02:8081

  3.3修改conf/slaves

node01
node02
node03

 4.分发

scp -r flink-1.7.2/ node02:$PWD 
scp -r flink-1.7.2/ node03:$PWD 

 OK,经测试可以使用

 

 

 

 

Flink1.7.2环境搭建

原文:https://www.cnblogs.com/note-djl/p/11801802.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!