iGIS

iGIS文档:

  • 用户手册
  • 开发者手册
  • 贡献手册
    • 1. 如何维护本文档
    • 2. 项目结构
    • 3. 开发环境配置
    • 4. 集群环境说明
      • 4.1. CDH环境搭建文档
      • 4.2. flink
        • 4.2.1. # FLINK环境搭建
      • 4.3. 广州总部集群环境说明
      • 4.4. hadoop
      • 4.5. k8s
      • 4.6. Kudu
      • 4.7. presto
      • 4.8. Spark
      • 4.9. 平台武研集群环境说明
      • 4.10. docker环境编译及部署
      • 4.11. 集群环境问题总结
    • 5. iGIS-SDE开发
    • 6. 性能测试
    • 7. iGIS平台算法测试情况一览
    • 8. 深度学习数据及模型说明
    • 9. 数据库设计
iGIS
  • »
  • 贡献手册 »
  • 4. 集群环境说明 »
  • 4.2. flink »
  • 4.2.1. # FLINK环境搭建
  • 查看页面源码

4.2.1. # FLINK环境搭建¶

平台使用的Flink版本为1.7.1:flink-1.7.1-bin-hadoop28-scala_2.11.tgz ## 1.将Flink的tgz包上传到/opt/software目录下 ## 2.解压Flink到/opt/module目录下 进入/opt/software目录。执行 tar -zxvf flink-1.7.1-bin-hadoop28-scala_2.11.tgz -C /opt/module ## 3.配置Flink环境变量 (1)获取Flink路径 pwd (2)打开/etc/profile文件 vim /etc/profile 在profile文件末尾添加JDK路径 ` #FLINK_HOME export FLINK_HOME=/opt/module/flink-1.7.1 export PATH=$PATH:$FLINK_HOME/bin ` (3)保存退出 (4)让修改的配置生效 source /etc/profile

## 4.测试flink是否配置成功 执行 flink -v

## 5.修改配置文件信息(/opt/module/flink-1.7.1/conf目录下)

(1)配置flink-conf.yaml vim flink-conf.yaml 修改如下配置: jobmanager.rpc.address: bigdata.master

(2)配置masters vim masters 添加如下配置: bigdata.master:8081

(3)配置slaves vim slaves 添加如下配置: bigdata.slave1 bigdata.slave2

## 6.将flink组件分发给其他机器 scp -r /opt/module/flink-1.7.1 root@bigdata.slave1:/opt/module scp -r /opt/module/flink-1.7.1 root@bigdata.slave2:/opt/module ## 7.启动flink服务 在主节点执行/opt/module/flink-1.7.1/bin/start-cluster.sh

## 8.其他服务命令 //停止服务 /opt/module/flink-1.7.1/bin/stop-cluster.sh

//查看服务 jps

主节点显示:StandaloneSessionClusterEntrypoint 从节点显示:TaskManagerRunner

下一页 上一页

© 版权所有 2020, southgis

利用 Sphinx 构建,使用了 主题 由 Read the Docs开发.