首页 > 其他分享 >元数据采集包升级后主要功能不能使用

元数据采集包升级后主要功能不能使用

时间:2023-06-30 11:36:53浏览次数:35  
标签:语句 功能 jekins jar 升级 采集 线程 打包

1.具体问题背景 2022年农历年前,为了解决大SQL文件血缘解析不能完整处理的问题。 之前是由于单个线程对文件中的sql语句,进行血缘解析的,当有嵌套层次很深的语句时,线程超时终止(原因未确定), 后代码优化,增加了线程池的多线程处理,每条语句采用单独的线程解析,避免一个语句不能执行,导致整个文件任务无法执行完毕。 代码提交之后,采用jekins进行打包,开发测试这边本地没有测试环境,现场部署后,待解决的问题可以处理。 但后面,有报元数据的数据源信息不能连接、采集, 问现场,说是部署后一段时间,元数据还是能连接采集。 然后根据错误日志分析,一是,报错中的hive、hbase依赖版本不兼容、二是,新写代码有导致。三是、hive环境问题。 根据日志分析新增代码,找不到具体的问题,排除二 虽然现场的描述,说第一种可能型不大,但需要质疑,然后替换原有的包,能正常采集,排除三。 然后对比之前可用的包和现在的jar包,用compare比较其中的jar包依赖,发现新的包中多了高版本的一些hive、hbase依赖。   分析为什么打包会有这样的问题,用新打出的包中的一些独有的jar包名称,在各pom文件查询,发现集成了一些非当前使用的pom文件中的jar, 检查jekins,使用的是正确的pom文件,然后思索可能性,是否是没有clean, 然后检查jekins打包脚本,发现kotlin编译前没有clean,导致之前打的包如果有额外的依赖jar不会被覆盖,相同的依赖却可以覆盖。   结论一: 1.尽量检查jekins的打包脚本,打包之前需要clean操作。 2.不要盲目相信现场同时的说辞,需要自己合理推测验证。

标签:语句,功能,jekins,jar,升级,采集,线程,打包
From: https://www.cnblogs.com/seufelix/p/17516148.html

相关文章

  • 记录一次项目数据采集分析-NEWC数据泄漏
     一不小心,把B圈的项目给扒拉下来了,发现这些大佬板还关联着PHA,PHIC两个盘子,号称国外。PHIC大本营在成都,哈哈哈,不要问我咋知道"15642377778""周传海""210219197403282316"项目方qq号378720717QQ群858864205"17771173077" "王云龙" "420222199402268316"项目方qq号34......
  • 9第九章 app端基本功能展示
    第九章app端基本功能展示目标能够完成app端文章列表展示功能开发能够完成app端文章详情的功能开发能够掌握解决long类型丢失精度的问题能够完成app端登录的功能能够掌握关注作者功能1app端-文章列表1.1app端文章列表-需求分析在手机端可以查看文章信息1,在默认频......
  • opengauss的资源管控功能介绍
    本文将为您介绍opengauss数据库的资源管控功能。opengauss作为一种先进的数据库管理系统,具备强大的资源管理能力,能够有效地分配和控制数据库系统中的资源,提高系统的性能和稳定性。资源管控是数据库管理的重要组成部分,它涉及到对CPU、内存、磁盘IO等资源的合理分配和使用。opengauss......
  • Qt联合海康威视工业相机采集,在线转Halcon变量并显示(独立封装、支持多相机、支持黑白相
    Qt联合海康威视工业相机采集,在线转Halcon变量并显示(独立封装、支持多相机、支持黑白相机和彩色相机)。原创文章,转载请说明出处,资料来源:http://imgcs.cn/5c/668685372998.html......
  • 双馈风力发电系统仿真,DFIG,采用背靠背双pwm变换器,具备最大功率追踪功能
    双馈风力发电系统仿真,DFIG,采用背靠背双pwm变换器,具备最大功率追踪功能。(1)转子侧变换器采用基于定子电压定向的矢量控制策略,有功无功解耦,具备MPPT能力,采用功率外环电流内环双闭环控制结构。(2)网侧采用电网电压定向的矢量控制策略,才用电压外环电流内环控制,直流母线电压稳定,输入功率......
  • 昆仑通态MCGS与台达伺服ASD-B2 通讯控制案例功能:通过昆仑通态MCGS触摸屏实现与台达AS
    昆仑通态MCGS与台达伺服ASD-B2 通讯控制案例功能:通过昆仑通态MCGS触摸屏实现与台达ASDB2通讯控制,全通讯控制台达B2驱动器速度设置,速度选择,速度启动,带扭矩限制速度控制,扭矩限制通讯设置。配件:昆仑通态MCGS触摸屏,台达ASDB2伺服驱动器+伺服电机。CN1接线端子,CN3伺服驱动器通讯......
  • 记录--写一个高德地图巡航功能的小DEMO
    这里给大家分享我在网上总结出来的一些知识,希望对大家有所帮助风格设置加载地图使用AMapLoader.load加载地图,从 控制台  申请一个属于自己的keyimportAMapLoaderfrom'@amap/amap-jsapi-loader';...constAMap=awaitAMapLoader.load({"key":"您自己申请的......
  • 注册功能 ,前端登录注册页面
    目录1异步发送短信1.1视图类1.2序列化类加入万能验证码2注册功能3.1视图类3.2序列化类补充3前端注册页面分析3.1Header.vue3.2Login.vue4前端登录注册页面复制4.1Login.vue4.2Register.vue4.3Header.vue5前端登录功能6前端注册功能1异步发送短信#原来的发送短......
  • [vue3-print-nb]vue3中实现打印功能
    vue3安装npminstallvue3-print-nb--save项目中引入//全局引用import{createApp}from'vue'importAppfrom'./App.vue'importPrintfrom'vue3-print-nb'constapp=createApp(App)app.use(Print)app.mount('#app')//......
  • .NET 个人博客-添加RSS订阅功能
    个人博客-添加RSS订阅功能前言个人博客系列已经完成了留言板文章归档推荐文章优化推荐文章排序博客地址:https://pljzy.top然后博客开源的原作者也是百忙之中添加了一个名为RSS订阅的功能,那么我就来简述一下这个功能是干嘛的,然后照葫芦画瓢实现一下。RSS简述来自ch......