首页 > 数据库 >SQL占用yarn资源监控

SQL占用yarn资源监控

时间:2023-07-20 18:02:33浏览次数:39  
标签:实现 占用 yarn 监控 SQL 资源

1.背景

    接上次自定义Hivehook后,此次主要是把下半段yan资源使用情况统计功能实现,从而实现对SQL占用情况统计,达到提取出慢SQL,高耗资源的SQL。

2.实施

    上次实现了提交的任务ID和Application_id的关联,这次主要每隔2分钟执行一次应用资源占用情况。

 具体实现代码,可以关注公众号码农独白,回复yarn资源监控获取

 

标签:实现,占用,yarn,监控,SQL,资源
From: https://www.cnblogs.com/beststrive/p/17569167.html

相关文章

  • MySQL锁机制与解决死锁问题
    引言:在数据库中,锁是一种重要的机制,用于控制并发访问数据,保证数据的一致性和完整性。MySQL作为一种常用的关系型数据库,也提供了丰富的锁机制来处理多个用户同时访问数据库时可能出现的并发问题。本篇博客将介绍MySQL的锁机制,包括如何添加锁以及解决可能出现的死锁问题。1.介绍MySQ......
  • MySQL尾部空格处理与哪些设置有关?
    在之前的这篇文章Oracle/MySQL/PG/SQLServer关系数据库中NULL与空字符串的区别[1]中,简单对比、介绍了一下MySQL的NULL/空格/尾部空格处理方式,主要对比了NULL与长度为空的字符串,其实很多地方没有分析到位就一笔带过了。这篇文章重新来细说一下MySQL的尾部空格处理方式。在MySQL中,......
  • java 缓存 SQL查询
    Java缓存SQL查询在开发过程中,频繁地执行SQL查询操作可能会导致性能问题。为了解决这个问题,我们可以使用缓存来存储已经执行过的查询结果,从而避免重复的数据库查询操作。本文将介绍如何在Java中使用缓存来提高SQL查询的性能,并提供代码示例来帮助读者理解。什么是缓存?缓......
  • linux mysql 安装
    centos安装mysql5.7安装包下载地址:https://dev.mysql.com/downloads/mysql/5.7.html#downloads下载安装包:wgethttps://dev.mysql.com/get/Downloads/MySQL-5.7/mysql-5.7.36-linux-glibc2.12-x86_64.tar.gz解压:tar-zxvfmysql-5.7.36-linux-glibc2.12-x86_64.tar.gz移动重命......
  • MySQL中IF函数使用:字段A的返回值,根据字段B和C的条件来决定
     场景说明:车辆的位置信息是否返回,根据车辆位置的更新时间是否大于车辆的出站时间来决定;如果车辆位置的更新时间大于车辆的出站时间,则为有效的数据,直接返回经纬度数据;否则,视为无效的数据,直接返回NULL。下面是SQL语句的片段:-------------------------------------------------......
  • mysql主从数据库
    今日配置主从数据库,在配置完成时,对主数据库进行创建库操作,从数据库正常同步。但直接对从数据库进行删库操作后。从数据库的sql能力无法正常进行,但主从数据库的IO通信,没有问题。在重新配置主从数据库后。问题解决。 ......
  • flak创建数据库报 NameError: name 'MySQLdb' is not defined
     因为pycharm中无法安装MySQLdb,安装会报错 所以安装pymysql然后替换MySQLdb  进入到mysqldb.py文件中 替换mysqldb方法,导入pymysql取别名为MySQLdb 再次执行便能成功  ......
  • mysql查询数据库重复数据
    查询重复领取的优惠券//查询8888888用户优惠券状态为未使用且数量大于2的用户领取过的优惠券SELECTdiscount_coupon_id,count(discount_coupon_id)ascFROM`faith_user_discount_coupon`whereuser_id='88888888'and`status`='1'GROUPBYdiscount_coupon_idhavingc>......
  • PGSQL_实操常用指南
    1、建表--定额配置主表--1、表不存在->创建--2、给注释CREATETABLEIFNOTEXISTSpublic.pro_salary_quota(idvarchar(50)NOTNULL,--主键Idworking_process_typeint4NOTNULL,--工序类型:1-构件工序,2-零件工序working_process_idvarch......
  • SQL 更新某一个字段的某些内容(删除)
    --需求:想将MPicture表里的FNO的地址统一修改下,去掉【图片地址】四个字--拓展:也可以将【图片地址】四个字替换成新的字replace(FNO,substring(FNO,8,4),'新地址啊')--说明:MPicture【表名】FNO【字段名】substring(FNO,8,4)【FNO,要替换的字段,8开始的位置,4截取的长度】update......