龙空技术网

第一章、Flink集群搭建 Standalone Cluster

波波侠—BBX 971

前言:

此刻同学们对“apache子域名集群配置”大体比较注意,我们都想要分析一些“apache子域名集群配置”的相关资讯。那么小编在网摘上收集了一些对于“apache子域名集群配置””的相关内容,希望各位老铁们能喜欢,同学们快快来了解一下吧!

前置条件JDK 11版本--必要条件机器间配置互信(本示例使用的三台机器分别为 192.168.10.140,192.168.10.150,192.168.10.160)--可选配置内网域名

#vim /etc/hosts192.168.10.140    master14.bbx.com       192.168.10.150    worker15.bbx.com       192.168.10.160    worker16.bbx.com 
关闭防火墙--建议(除非你非常清楚自己要什么,做什么)
systemctl stop firewalldsystemctl disable firewalld.service
安装 Flink下载
 wget 
解压
 tar -zxvf  flink-1.15.2-bin-scala_2.12.tgz
配置详细的配置参数请参阅官方地址: 编辑 conf/flink-conf.yaml
jobmanager.rpc.address: master14.bbx.com #指向 Master 节点jobmanager.memory.process.size: 2500m #Master节点允许的内存,单位为MBtaskmanager.memory.process.size: 2500m #Worker节点允许的内存,单位为MBrest.bind-address: 0.0.0.0 #webUI 允许外界访问jobmanager.bind-host: 0.0.0.0 #jobmanager 允许访问的地址taskmanager.bind-host: 0.0.0.0 #taskmanager 允许访问的地址# taskmanager.host: localhost       #注释该配置,否侧 web UI中  taskmanager没有内存数据 Note:如果某些节点需要更多内存,可以在对应的节点上设置上面的配置
编辑 conf/masters
master14.bbx.com:8081
编辑 conf/workers
worker15.bbx.comworker16.bbx.com
分发flink 程序--所有节点上的Flink目录必须相同,可以使用NFS共享目录,或者复制到相同目录,本示例采用复制方式
 scp -r flink-1.15.2 worker16.bbx.com:/home/software
集群管理启动集群
 #只需要在其中一台机器执行 ./bin/start-cluster.sh 
停止集群
  ./bin/stop-cluster.sh
查看集群进程
 ps aux | grep flink
添加、删除 jobmanager
 #在你想添加或删除的节点上操作 bin/jobmanager.sh ((start|start-foreground) [host] [webui-port])|stop|stop-all
添加、删除 taskmanager
 #在你想添加或删除的节点上操作 bin/taskmanager.sh start|start-foreground|stop|stop-all
Flink UI访问浏览器访问 192.168.10.140:8081(master14 节点的8081 端口)

标签: #apache子域名集群配置