• 2024-05-15Flink执行图
    Flink的代码编写流程为env->source->transform->sink,基本所有的代码都是大致按照图1的流程进行代码编写,当然中间也会有一些封装之类的。  Flink代码写好后,它的任务调度执行图按照生成顺序分为:逻辑流图(StreamGraph)->作业图(JobGraph)->执行图(ExecutionGraph)->物理图(Physica
  • 2023-12-1412.14日记
    FlinkJobManager架构原理的核心是JobMaster和ResourceManager,其中JobMaster负责任务的调度和监控,ResourceManager负责集群资源的管理。JobMaster和ResourceManager之间通过RPC通信进行交互。JobMaster主要负责以下几个方面:   任务管理JobMaster负责接收用户提交的任务,并将任
  • 2023-01-30【Flink】浅谈Flink架构和调度
    【Flink】浅谈Flink架构和调度大家好,我们的gzh是朝阳三只大明白,满满全是干货,分享近期的学习知识以及个人总结(包括读研和IT),跪求一波关注,希望和大家一起努力、进步!!Flink架构Fl
  • 2022-11-30大数据学习之Flink(二)
    Flink运行架构Flink的运行时架构中,最重要的就是两大组件:作业管理器(JobManger)和任务管理器(TaskManager)。对于一个提交执行的作业,JobManager是真正意义上的“管理者”(Mast
  • 2022-10-13152-《大数据架构师》 Flink JobMaster 启动和 Slot资源管理_ev
                                     
  • 2022-09-29Flink helloworld及理论(一)
    Flink理论flink安装我使用的是flink的单机版,过程在这:https://www.cnblogs.com/wuxiaolong4/p/16548910.htmlhelloworld      import org.apache.flink.api.s