• 2024-11-19JVM 内存分配的调优过程
    以一个创建1MB对象的接口来模拟万级并发请求产生大量对象的场景。@RequestMapping(value="/test1")publicStringtest1(HttpServletRequestrequest){List<Byte[]>temp=newArrayList<Byte[]>();Byte[]b=newByte[1024*1024];temp.add(b)
  • 2024-11-18一文带你搞懂GaussDB数据库性能调优
    本文分享自华为云社区《【GaussTech技术专栏】GaussDB性能调优》,作者:GaussDB数据库。数据库性能调优是一项复杂且系统性的工作,需要综合考虑多方面的因素。因此,调优人员应对系统软件架构、软硬件配置、数据库配置参数、并发控制、查询处理和数据库应用拥有广泛而深刻的理解。本
  • 2024-11-1811月16日,工信部人才交流中心 & CUUG - PGCP / PGCM认证考试完成!
    2024年11月16日,由工业和信息化部人才交流中心与北京神脑资讯技术有限公司共同举办的PostgreSQL管理员岗位能力认证考试(PGCP中级/PGCM高级)完成。 中级PG认证专家-PGCP(PostgreSQLCertifiedProfessional):是对PostgreSQL数据库技术能力的一种认可,达到了专家级别,可以对PostgreSQ
  • 2024-11-15量化训练及精度调优经验分享
    本文提纲:fx和eager两种量化训练方式介绍量化训练的流程介绍:以mmdet的yolov3为例常用的精度调优debug工具介绍案例分析:模型精度调优经验分享第一部分:fx和eager两种量化训练方式介绍首先介绍一下量化训练的原理。上图为单个神经元的计算,计算形式是加权求和,再
  • 2024-11-1311.13机器学习_KNN和模型选择调优
    7特征降维实际数据中,有时候特征很多,会增加计算量,降维就是去掉一些特征,或者转化多个特征为少量个特征特征降维其目的:是减少数据集的维度,同时尽可能保留数据的重要信息。特征降维的好处:减少计算成本:在高维空间中处理数据可能非常耗时且计算密集。降维可以简化模型,
  • 2024-11-13Flink调优之前,必须先看懂的TaskManager内存模型
    Flink调优之前,必须先看懂的TaskManager内存模型TaskManager内存模型Flink的程序运行在内存中。不管是我们在学习C语言、Java语言的时候,我们都很想知道程序到底是如何管理内存的。Flink程序也一样,当我们写完Flink程序,我们需要为Flink程序分配运行的资源,那针对什么样的数据量,需要
  • 2024-11-13ES调优建议
    查询模块保证ES节点有充足的内存ES默认分配节点一半的内存给JVM(最多会分配30GB),剩余的内存用于向量索引和pagecache,节点内存不足会导致频繁触发向量索引的驱逐和加载,导致查询延迟较高。因此需要确保数据节点有足够的内存,使向量索引常驻内存。可以通过以下方式获取节点向量数据
  • 2024-11-11利用 Linux 系统性能调优技巧优化系统性能
  • 2024-11-11大数据从业者必知必会的Hive SQL调优技巧
    作者:京东科技李然辉 大数据从业者必知必会的HiveSQL调优技巧摘要:在大数据领域中,HiveSQL被广泛应用于数据仓库的数据查询和分析。然而,由于数据量庞大和复杂的查询需求,HiveSQL查询的性能往往不尽人意。本文针对HiveSQL的性能优化进行深入研究,提出了一系列可行的调优方案,
  • 2024-11-10JVM 进阶:深入理解与高级调优
    在学习了JVM的基础知识后,接下来我们将深入了解JVM的内部工作原理、高级优化方法和性能调优技巧,这些内容将帮助你更好地管理Java应用的性能,尤其是在面对大规模应用和高并发场景时。一、深入了解JVM内存结构JVM内存结构的划分和管理直接关系到Java程序的运行效率,深
  • 2024-11-09常用的 jvm 调优的参数都有哪些
    ​  堆内存设置-Xms:设置JVM堆的初始大小。例如:​​-Xms2g​​表示初始堆大小为2GB。-Xmx:设置JVM堆的最大大小。例如:​​-Xmx2g​​表示最大堆大小为2GB。-XX:NewRatio:设置年轻代和老年代的比例。例如:​​-XX:NewRatio=4​​表示年轻代和老年代的比例为1
  • 2024-11-09常用的 jvm 调优的参数都有哪些
       ​ 堆内存设置-Xms:设置JVM堆的初始大小。例如:​​-Xms2g​​表示初始堆大小为2GB。-Xmx:设置JVM堆的最大大小。例如:​​-Xmx2g​​表示最大堆大小为2GB。-XX:NewRatio:设置年轻代和老年代的比例。例如:​​-XX:NewRatio=4​​表示年轻代和老年代的比
  • 2024-11-07关于JVM调优与实践
    1.如何开始JVM调优——tomcat内部署war包修改TOMCAT_HOME/bin/catalina.sh文件JAVA_OPTS="-Xms512m-Xmx1024m"——linux环境下jar包启动springboot项目启动时使用nohupjava-Xms512m-Xmx1024m-jarx.jar--spring.profiles.active=prod&nohup:在系统后天不挂断地运
  • 2024-11-07Go-性能优化、优化分析、调优实战pprof
    使用官方自带benchmark进行基准性能测试第一个是函数名-核数第二个是执行次数第三个是一次执行时间第四个是一次执行的多大的内存第五个是一次执行申请几次内存slice用的时候在make()初始化切片时提供容量信息data:=make([]int,0)data:=make([]int,0,size)//goodpre
  • 2024-11-07AnytimeCL:难度加大,支持任意持续学习场景的新方案 | ECCV'24
    来源:晓飞的算法工程笔记公众号,转载请注明出处论文:AnytimeContinualLearningforOpenVocabularyClassification论文地址:https://arxiv.org/abs/2409.08518论文代码:https://github.com/jessemelpolio/AnytimeCL创新点在线训练时,每个批次由新训练样本和类别平衡
  • 2024-11-03JVM-GC调优
    GC调优GC调优指的是对垃圾回收(GarbageCollection)进行调优。GC调优的主要目标是避免由垃圾回收引起程序性能下降。GC调优的核心分成三部分:1、通用Jvm参数的设置。2、特定垃圾回收器的Jvm参数的设置。3、解决由频繁的FULLGC引起的程序性能问题。GC调优没有没有唯一的标准
  • 2024-11-02Java面试题中高级进阶(JVM调优篇)
    前言本来想着给自己放松一下,刷刷博客,突然被几道面试题难倒!调优命令有哪些?常见调优工具有哪些?MinorGC与FullGC分别在什么时候发生?你知道哪些JVM性能调优参数(简单版回答)?对象一定分配在堆中吗?有没有了解逃逸分析技术?似乎有点模糊了,那就大概看一下面试题吧。好记性不如烂键
  • 2024-11-02Java面试题中高级进阶(JVM调优篇)
    前言本来想着给自己放松一下,刷刷博客,突然被几道面试题难倒!调优命令有哪些?常见调优工具有哪些?MinorGC与FullGC分别在什么时候发生?你知道哪些JVM性能调优参数(简单版回答)?对象一定分配在堆中吗?有没有了解逃逸分析技术?似乎有点模糊了,那就大概看一下面试题吧。好记性不如烂键盘***
  • 2024-11-01如何在鲲鹏平台上快速上手应用开发?鲲鹏DevKit给你答案
    本文分享自华为云社区《鲲鹏DevKit,助力开发者基于鲲鹏服务器实现一站式应用开发》,作者:华为云社区精选。本期直播的主题是《鲲鹏DevKit,助力开发者基于鲲鹏服务器实现一站式应用开发》,华为鲲鹏DTSE技术布道师HankHou,与鲲鹏生态开发者交流如何在鲲鹏服务器上快速开展应用开发,跟大家
  • 2024-11-01PostgreSQL技术大讲堂 - 第70讲:PG数据库数据加载调优案例
     PostgreSQL技术大讲堂-第70讲,主题:postgresq数据库数据加载调优案例讲课内容:  1、数据库参数调整  2、后台进程cpu绑定调整  3、数据库并行操作调整  数据加载是每个DBA经常需要完成的工作,如何让数据加载变得更快,本期视频跟大家一起分享调优带来的乐趣
  • 2024-10-31大模型训练优化方法_大模型调优
    写在前面在训练模型尤其是大模型的时候,如何加快训练速度以及优化显存利用率是一个很关键的问题。本文主要参考HF上的一篇文章:https://huggingface.co/docs/transformers/perf_train_gpu_one,以及笔者在实际训练中的一些经验,给出一些比较实用的方法。先看一个总览的表:方法
  • 2024-10-30HarmonyOS:DevEco Profiler调优工具
    ★★★★★★★★★★★★★★★★★★★★★★★★★★★★★★★★➤博客园地址:为敢技术(https://www.cnblogs.com/strengthen/ )➤GitHub地址:https://github.com/strengthen➤原文地址:https://www.cnblogs.com/strengthen/p/18516696➤如果链接不是为敢技术的博客园地址,则可能是
  • 2024-10-30GaussDB可维护性--支持SQL PATCH
    支持SQLPATCH可获得性本特性自503.1.0版本开始引入。特性简介SQLPATCH能够在避免直接修改用户业务语句的前提下对查询执行的方式做一定调整。在发现查询语句的执行计划、执行方式未达预期的场景下,可以通过创建查询补丁的方式,使用Hint对查询计划进行调优或对特定的语句
  • 2024-10-29ArkTS 中的内存调优与配置:最佳实践
    本文旨在深入探讨华为鸿蒙HarmonyOSNext系统(截止目前API12)的技术细节,基于实际开发实践进行总结。主要作为技术分享与交流载体,难免错漏,欢迎各位同仁提出宝贵意见和问题,以便共同进步。本文为原创内容,任何形式的转载必须注明出处及原作者。引言HarmonyOSNext的内存管理与垃