网站首页
编程语言
数据库
系统相关
其他分享
编程问答
YarnState
2024-10-28
如何实现Dolphinscheduler YARN Task状态跟踪?
背景Dolphinscheduler针对YARN任务,比如说MR、Spark、Flink,甚至是Shell任务,最初都是会判断如果有YARN任务,解析到applicationId。这样就会不单单以判断客户端进程为单一判断依据,还要根据YARN状态进行最终的Dolphinscheduler任务状态判断。后期,社区对此进行了重构(确实是好的向往,现