首页 > 数据库 >分布式数据库代理导出分片大表僵死或卡死原因分析及调优

分布式数据库代理导出分片大表僵死或卡死原因分析及调优

时间:2023-03-08 14:55:34浏览次数:36  
标签:僵死 导出 代理 调优 报错 分片 分布式 大表

1、背景现象****分布式数据库导出分片大表代理卡死或者代理僵死

2、 ****分布式数据库导出小表或者不是分片表时发现数据可以导出,但是当数据量大时就没法导出数据,再复现一下

3、 执行 脚本发现代理僵死无法登录

4 分析 过程:
    4.1 查看 导出时的报错信息:无
    4.2查看 代理  再 导出 时间段是否有报错:代理无报错
    4.3执行jmap -heap pid
无法连接     4.4执行jstat -gcutil pid 从查看的信息可以看出老年代已经使用99.96%了,判断可能时老年代分配得少
 查看 对应 配置的  jvm 信息 元空间只分配了128M,确实比较小,建议把元空间改为1024M
 4.5重启代理
 执行 脚本已可以完成数据导出

5、 总结 代理僵死时配置的jvm不合理导致

标签:僵死,导出,代理,调优,报错,分片,分布式,大表
From: https://www.cnblogs.com/harda/p/17191986.html

相关文章

  • Java分布式应用:性能调优
    第五部分性能调优性能瓶颈的表象:1.资源消耗过多、外部处理系统的性能不足2.资源消耗不多,但程序的响应速度不够关于CPU通常使用时间片、多核的方法达到对CPU的分割;每个C......
  • HiveSql调优系列之Hive严格模式,合理使用Hive严格模式
     所谓Hive的严格模式,就是为了避免用户提交一些恶意SQL,消耗大量资源进而使得运行环境崩溃做出的一些安全性的限制。而执行过程中,可以通过关闭Hive严格模式,方便执行HQL.......
  • 一文网尽关于大文件(分片)上传你需要知道的所有前置知识点
    分片上传知识点一.XMLHttpRequest.uploadXMLHttpRequest.upload属性返回一个XMLHttpRequestUpload对象,用来表示上传的进度。这个对象是不透明的,但是作为一个XMLHttpRe......
  • C# MongDb踩坑记录--分片写入报错 An upsert on a sharded collection must contain t
    环境C#mongdb.drivercollection分片_id为片键报错信息Awriteoperationresultedinanerror.WriteError:{Category:"Uncategorized",Code:61,Message:......
  • redis性能测试及瓶颈分析调优
    一、简介Redis(RemoteDictionaryServer),即远程字典服务,是一个开源的使用ANSIC语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库,并提供多种语言的API......
  • Java程序调优分析-待补充
    一、 JAVA程序运行逻辑分析示例图:   类加载器(ClassLoader):负责将编译好的.class字节码文件加载到内存中,使得JVM可以实例化或以其他方式使用加载后的类。类加载器......
  • 磁盘瓶颈分析与调优方向
    1.磁盘基本认识磁盘是用于存储数据的,相比于内存的优点是可以大量存储数据,可持久化;缺点是读写速度慢2.程序的使用场景1).日志文件--长期使用2).附件上传存储,比如头像、图......
  • mperf:移动/嵌入式平台算子性能调优利器
    作者:旷视MegEngine架构师张孝斌快速了解mperf在移动/嵌入式平台,为了最大程度发挥硬件算力,对算子极致性能的追求变成必然,不同于桌面/服务器平台,移动/嵌入式平台在算......
  • 记录一个cpu彪高的BUG处理--jvm调优
    业务场景:游戏行业,N个服务器,要进行大批量的合服处理,玩家数据会上升,从新整理和服务器的分配情况和逻辑处理,正常开发后,当天白天正常,然后晚上高峰期开始玩家频繁反馈无法登录~~......
  • 【Azure 存储服务】Azure Storage Account 下的 Table 查询的性能调优
    问题描述AzureStorageAccount下的Table查询的性能调优?问题解答因为AzureStorageTable服务(表服务)与常规的关系型数据库不一样(例如:MySQL,SQLServer等),他里面存储的......