首页 spark

spark

  • Flink状态监控介绍

    Flink状态监控介绍

    监控机制的必要性: 对于需要7 * 24小时不间断运行的流式计算程序来说,能实时监控程序运行状况、出现异常告警能立即响应并快速定位问题是必须具备的能力。 所以在对监控的设计上Flink也是下了一定功夫的,在其官网也是有非常多的介绍。 Flink Metric内置的监控涵盖面丰富,支持: 1 系统级别的监控:CPU状态信息、内存状态信息等(默认关闭,需要更改配置文件打开,且lib目录下需要添加相关依赖jar包) 2 JVM级别的监控:CPU占用率、堆内存使用情况、线程数量、GC已经类加载数量。 3 Flink...

    大数据 2019-09-02 242 0 flinkspark
  • docker初体验和使用笔记

    docker初体验和使用笔记

    在ubuntu13.10上体验docker 首先要检测以下你的内核版本 sudo uname -a Linux helight-Xu 3.11.0-26-generic #45-Ubuntu SMP Tue Jul 15 04:02:06 UTC 2014 x86_64 x86_64 x86_64 GNU/Linux 第一次添加Docker的repository到你的本地秘钥库 sudo apt-key adv --keyserver keyserver.ubuntu.com --re...

    linux 应用 2015-01-20 60 0 mavenspark
1