Flink1.7.2环境搭建
时间:2019-11-05
本文章向大家介绍Flink1.7.2环境搭建,主要包括Flink1.7.2环境搭建使用实例、应用技巧、基本知识点总结和需要注意事项,具有一定的参考价值,需要的朋友可以参考一下。
这里虚拟机模拟三台机器,分别为node01,node02,node03
搭建计划 Flink Yarn HA模式
node01: JM+TM
node02:JM+TM --备用节点
node03:TM
1.上传解压
2.flink下创建目录tem
3.修改配置文件
3.1conf/flink-conf.yaml
1 jobmanager.rpc.address: node01 2 jobmanager.rpc.port: 6123 3 jobmanager.heap.mb: 1024 4 taskmanager.heap.mb: 1024 5 taskmanager.numberOfTaskSlots: 2 6 taskmanager.memory.preallocate: false 7 parallelism.default: 1 8 jobmanager.web.port: 8081 9 taskmanager.tmp.dirs: /export/servers/flink-1.7.2/tmp 10 #开启HA 11 state.backend: filesystem 12 state.backend.fs.checkpointdir: hdfs://node01:8020/flink-checkpoints 13 high-availability: zookeeper 14 high-availability.storageDir: hdfs://node01:8020/flink/ha/ 15 high-availability.zookeeper.quorum: node01:2181,node02:2181,node03:2181
3.2修改conf/masters
node01:8081 node02:8081
3.3修改conf/slaves
node01 node02 node03
4.分发
scp -r flink-1.7.2/ node02:$PWD scp -r flink-1.7.2/ node03:$PWD
OK,经测试可以使用
原文地址:https://www.cnblogs.com/note-djl/p/11801802.html
- PHP数据结构(八) ——赫夫曼树实现字符串编解码(实践2)
- 你应该使用 Python 管理 Cron 作业
- CSS3有哪些好用的属性?
- PHP数据结构(九) ——图的定义、存储与两种方式遍历
- 使用 React 和 Django REST Framework 构建你的网站
- 小程序中带图片modal的实现
- 号称「永远不会输钱」的马丁格尔策略
- 小程序中图片高度等比缩放
- 三分钟使用 Python 处理 Nginx 日志
- Python,Shell 和 三个标准文件
- 【微信官方】获取用户信息方案介绍
- 【实战】如何使用 Python 从 Redis 中删除 4000万 KEY
- [多图] DevOps 也要懂点 Excel
- [实战篇] Python 运维中使用并发
- JavaScript 教程
- JavaScript 编辑工具
- JavaScript 与HTML
- JavaScript 与Java
- JavaScript 数据结构
- JavaScript 基本数据类型
- JavaScript 特殊数据类型
- JavaScript 运算符
- JavaScript typeof 运算符
- JavaScript 表达式
- JavaScript 类型转换
- JavaScript 基本语法
- JavaScript 注释
- Javascript 基本处理流程
- Javascript 选择结构
- Javascript if 语句
- Javascript if 语句的嵌套
- Javascript switch 语句
- Javascript 循环结构
- Javascript 循环结构实例
- Javascript 跳转语句
- Javascript 控制语句总结
- Javascript 函数介绍
- Javascript 函数的定义
- Javascript 函数调用
- Javascript 几种特殊的函数
- JavaScript 内置函数简介
- Javascript eval() 函数
- Javascript isFinite() 函数
- Javascript isNaN() 函数
- parseInt() 与 parseFloat()
- escape() 与 unescape()
- Javascript 字符串介绍
- Javascript length属性
- javascript 字符串函数
- Javascript 日期对象简介
- Javascript 日期对象用途
- Date 对象属性和方法
- Javascript 数组是什么
- Javascript 创建数组
- Javascript 数组赋值与取值
- Javascript 数组属性和方法
- (十)golang--运算符
- (十一)golang--键盘输入
- python中的__call__和__repr__魔术方法
- (十二)golang--进制和位运算
- Java实现操作系统实验之磁盘调度
- hashMap源码分析即hashTable和 hashMAp的区别
- 走进STL - 红黑树,是圣诞树吗
- BigDecimal大小判断
- Vue3.0 beta源码学习笔记(一)
- python实现线性回归之简单回归
- 走进STL - 空间配置器,STL背后的故事
- C++ 智能指针
- python实现线性回归之lasso回归
- 分页查询 offset 和 limit 和 limit 的区别
- mybatis文件映射之获取参数值时#和$的区别