首页 > 其他分享 >应用"懒加载"模式,优化@Transactional事务性能

应用"懒加载"模式,优化@Transactional事务性能

时间:2025-01-19 17:55:03浏览次数:1  
标签:事务 return Transactional equals 数据库 getName LazyConnectionDataSourceProxy method 

背景

在项目开发中,使用 @Transactional 注解来管理事务非常方便,且优雅。但是也存在一个问题:长事务问题

很多被 @Transactional 标记的方法,实际上并不需要进行数据库操作,或者说,它们在执行的很长一段时间内都不会真正触发数据库访问。

举个例子,我们的业务逻辑可能如下:

@Service
public class OrderService {

    @Transactional
    public void processOrder(Long orderId) {
        // 1. 复杂的业务校验(纯计算,无数据库操作)
        validateOrder(orderId);

        // 2. 调用外部服务(可能是一个耗时操作,比如支付、物流)
        callExternalService(orderId);

        // 3. 数据库操作(此时才真正需要数据库连接)
        updateOrderStatus(orderId);
    }
}

在这个 processOrder() 方法中:

  • 只有 updateOrderStatus(orderId) 这一行代码涉及数据库操作。
  • 但由于 @Transactional 的作用,Spring 在 方法一开始 就会从数据库连接池获取连接,即便前面两步根本不需要用到数据库。
  • 如果 validateOrder()callExternalService() 是一个耗时操作,就会导致数据库连接长时间被占用,影响系统吞吐量。

这种情况下,我们可以使用 LazyConnectionDataSourceProxy 来优化数据库连接的获取时机,避免不必要的连接占用。


解决办法:使用Spring提供的LazyConnectionDataSourceProxy

Spring给我们提供了一个非常好的利器:可以解决此类长事务的问题,来看具体用法示例, 后面我会分析它的原理

LazyConnectionDataSourceProxy 用法示例

在 Spring 配置中,我们可以用 LazyConnectionDataSourceProxy 代理现有的 DataSource,使得数据库连接不会在事务开始时立即获取,而是在真正执行 SQL 时才获取。

Spring Boot 配置示例

@Configuration
public class DataSourceConfig {

    @Bean
    public DataSource realDataSource() {
        HikariDataSource dataSource = new HikariDataSource();
        dataSource.setJdbcUrl("jdbc:mysql://localhost:3306/test");
        dataSource.setUsername("root");
        dataSource.setPassword("password");
        return dataSource;
    }

    @Bean
    public DataSource dataSource() {
        return new LazyConnectionDataSourceProxy(realDataSource());
    }

    @Bean
    public PlatformTransactionManager transactionManager() {
        return new DataSourceTransactionManager(dataSource());
    }
}

在这里,我们用 LazyConnectionDataSourceProxy 包装了真正的数据库 DataSource,然后让 TransactionManager 使用这个代理数据源。


LazyConnectionDataSourceProxy 的原理

LazyConnectionDataSourceProxy 的核心机制就是 延迟获取数据库连接,它的主要逻辑如下:

  1. 事务开启时,Spring 事务管理器不会立即从连接池获取数据库连接,而是返回一个 Connection 代理对象。
  2. 当代码真正执行数据库操作(如 prepareStatement()createStatement())时,代理对象才会去获取真实的数据库连接。
  3. 事务提交或回滚时,如果 Connection 代理对象从未真正执行过 SQL,则根本不会创建数据库连接,从而节省资源。

关键源码如下:

    public Connection getConnection() throws SQLException {
        // 返回的是代理对象
        return (Connection)Proxy.newProxyInstance(ConnectionProxy.class.getClassLoader(), new Class[]{ConnectionProxy.class}, new LazyConnectionInvocationHandler());
    }

    public Connection getConnection(String username, String password) throws SQLException {
        return (Connection)Proxy.newProxyInstance(ConnectionProxy.class.getClassLoader(), new Class[]{ConnectionProxy.class}, new LazyConnectionInvocationHandler(username, password));
    }

其中,getConnection() 方法返回的 Connection 是一个 JDK 动态代理对象,它会拦截 prepareStatement()createStatement() 等方法,直到真正执行 SQL 时才去获取连接。这里我们主要关注LazyConnectionInvocationHandler类的invoke方法,因为根据JDK动态代理的特性, 当Connection代理对象的方法执行时,会触发到invoke方法

LazyConnectionInvocationHandler源码解析

主要需要关注LazyConnectionInvocationHandlerinvoke方法,关键代码部分有增加注释,感兴趣的可以看看

public Object invoke(Object proxy, Method method, Object[] args) throws Throwable {
            // 以下的这些 if …… else 的判断,主要就是通过排除法锁定prepareStatement 方法
            // 只要 method.getName 不为:prepareStatement 则spring都使用了硬编码做了模拟方法实现,可以仔细分析一下源代码
            if (method.getName().equals("equals")) {
                return proxy == args[0];
            } else if (method.getName().equals("hashCode")) {
                return System.identityHashCode(proxy);
            } else {
                if (method.getName().equals("unwrap")) {
                    if (((Class)args[0]).isInstance(proxy)) {
                        return proxy;
                    }
                } else if (method.getName().equals("isWrapperFor")) {
                    if (((Class)args[0]).isInstance(proxy)) {
                        return true;
                    }
                } else if (method.getName().equals("getTargetConnection")) {
                    return this.getTargetConnection(method);
                }
// 当没有执行 prepareStatement 方法,则 hasTargetConnection() 的返回值恒为 false 
            // 但是该 if 逻辑内部恰好排除了 prepareStatement 方法的执行,
            // 也就是说当 Connection 执行 prepareStatement 时会进入else 的处理逻辑
                if (!this.hasTargetConnection()) {
                    if (method.getName().equals("toString")) {
                        return "Lazy Connection proxy for target DataSource [" + LazyConnectionDataSourceProxy.this.getTargetDataSource() + "]";
                    }
                    if (method.getName().equals("getAutoCommit")) {
                        if (this.autoCommit != null) {
                            return this.autoCommit;
                        }
                    } else {
                        if (method.getName().equals("setAutoCommit")) {
                            this.autoCommit = (Boolean)args[0];
                            return null;
                        }
                        if (method.getName().equals("getTransactionIsolation")) {
                            if (this.transactionIsolation != null) {
                                return this.transactionIsolation;
                            }
                        } else {
                            if (method.getName().equals("setTransactionIsolation")) {
                                this.transactionIsolation = (Integer)args[0];
                                return null;
                            }
                            if (method.getName().equals("isReadOnly")) {
                                return this.readOnly;
                            }
                            if (method.getName().equals("setReadOnly")) {
                                this.readOnly = (Boolean)args[0];
                                return null;
                            }
                            if (method.getName().equals("getHoldability")) {
                                return this.holdability;
                            }
                            if (method.getName().equals("setHoldability")) {
                                this.holdability = (Integer)args[0];
                                return null;
                            }
                            if (method.getName().equals("commit")) {
                                return null;
                            }
                            if (method.getName().equals("rollback")) {
                                return null;
                            }
                            if (method.getName().equals("getWarnings")) {
                                return null;
                            }
                            if (method.getName().equals("clearWarnings")) {
                                return null;
                            }
                            if (method.getName().equals("close")) {
                                this.closed = true;
                                return null;
                            }
                            if (method.getName().equals("isClosed")) {
                                return this.closed;
                            }
                            if (this.closed) {
                                throw new SQLException("Illegal operation: connection is closed");
                            }
                        }
                    }
                }
// 这里才真正获取数据库连接
                try {
                    return method.invoke(this.getTargetConnection(method), args);
                } catch (InvocationTargetException var5) {
                    throw var5.getTargetException();
                }
            }
        }

原理一句话总结:

使用JDK动态代理connection, 使得原有@Transaction注解在方法第一行就会获取数据库连接的模式,改变为只有当真正需要执行sql时,才获取连接,也即懒加载模式获取连接,这样就大大减少了连接的占用时间,也可以缩短事务的占用时间


性能优化效果

在引入 LazyConnectionDataSourceProxy 之后,数据库连接的获取时机由 "事务开始" 变为 首次执行 SQL 时,这带来了几个优化点:

  1. 减少数据库连接池的压力:原本事务开启就会立即获取数据库连接,现在只有在执行 SQL 语句时才会获取,避免连接池资源被长期占用。
  2. 提高系统吞吐量:在高并发场景下,多个 @Transactional 方法可能会并发执行,如果它们的前半部分是耗时操作,LazyConnectionDataSourceProxy 可以减少数据库连接的浪费,从而提高整体性能。
  3. 优化 @Transactional 在无数据库操作事务中的表现:如果 @Transactional 方法最终根本没有执行 SQL,那么 LazyConnectionDataSourceProxy 会使得这个事务 从头到尾都不会获取数据库连接,减少了不必要的资源开销。

实际使用中的注意点

  1. LazyConnectionDataSourceProxy 仅仅优化了数据库连接的获取时机,并不会改变事务的传播机制。如果方法确实需要事务,@Transactional 仍然是必不可少的。
  2. 不能直接替代数据库连接池LazyConnectionDataSourceProxy 需要和 HikariCP、Druid 等连接池配合使用,保证高效的连接管理。
  3. 不适用于直接管理 Connection 的代码。如果代码中有 connection.unwrap()connection.getMetaData() 这样的调用,可能会导致代理对象提前获取连接,影响延迟获取的效果。

总结

在 Spring 事务管理中,@Transactional 非常方便,但如果方法内部的 非数据库操作占比高,就可能造成数据库连接的长期占用,事务的长时间占用,影响系统性能

使用 LazyConnectionDataSourceProxy 可以 延迟数据库连接的获取,让事务管理更加高效,减少数据库连接池的压力,特别适用于高并发、复杂业务逻辑的场景。

对于 @Transactional 方法中包含大量 非数据库操作(如远程调用、复杂计算) 的情况,这个优化手段值得尝试!

最后

往期更多干货,请点击加瓦点灯

本文由mdnice多平台发布

标签:事务,return,Transactional,equals,数据库,getName,LazyConnectionDataSourceProxy,method,
From: https://www.cnblogs.com/javadd/p/18679746

相关文章

  • 深入探索 Vue.js 最新组件开发技术:实现动态模块加载器
    随着前端技术的飞速发展,Vue.js的组件化开发理念已经被广泛应用。今天,我们将探索一种最新的技术模式:动态模块加载器在Vue.js中的实现。这种模式可以提升应用的性能,并简化大型项目的组件管理。为什么需要动态模块加载器?在传统的Vue.js开发中,我们经常通过import和requir......
  • 如何在仿真分析,预测中 应用风力发电、光伏发电数据、用电负荷数据集,构建一个全面的时
    风力发电、光伏发电数据、用电负荷数据集,用于仿真分析,预测等。[1]光伏数据,光伏出力年光伏数据集,包含光伏发电功率、多种类型光照辐射强度数据(DNI,DHI,GHI),附带多种数据,可用于光伏场景生成与缩减、光伏特性分析、光伏优化调度等。[2]光伏预测功率数据2007-2020光伏预测功......
  • 12 分布式事务
    分布式事务产生的原因我们拿mysql数据库来说,当数据库为单体数据库的时候,我们打开事务,执行sql为预执行阶段,最后commit时通过日志控制最终全部提交后存储到磁盘中,如果commit失败,可以通过日志控制回滚回来,但是当我们的数据库实例为多个的时候,不同的数据源,我们的日志已经无法控......
  • 基于SpringBoot高校办公室行政事务管理系统的设计与实现
    1.引言在当今的软件开发领域,企业级应用的开发和部署速度直接影响着业务的竞争力。SpringBoot以其轻量级、快速启动和强大的集成能力,成为构建现代企业级应用的首选框架。本文将带您深入了解SpringBoot框架的核心特性,并展示如何利用它构建一个高效、可扩展的系统。2.开发......
  • 探秘数据库事务并发问题及解决之道
    在数据库事务处理的世界里,脏读、不可重复读、幻读如同“捣乱分子”,时不时就会搅乱数据的一致性,好在我们有MVCC(多版本并发控制)、行锁、表锁这些“得力卫士”来应对。 一、脏读及解决策略 脏读就像是偷看了别人还没写完的草稿,读到了未提交的修改数据。 -MVCC机制:它化身......
  • 使用Axios实现表格数据动态加载与转换
    在现代的Web开发中,前后端分离架构越来越普遍。前端页面通过Ajax请求从后端获取数据并进行展示是一种常见的需求。本文将通过一个简单的示例,介绍如何使用Vue.js结合ElementUI以及Axios库,实现表格数据的动态加载与转换。一、项目背景在开发一个会员管理系统时,我们需要在前端页......
  • 【神兵利器】Windows平台shellcode免杀加载器
    项目介绍免杀,bypassav,免杀框架,nim,shellcode,使用nim编写的shellcode加载器,可快速生成免杀可执行文件下载地址Windows平台shellcode免杀加载器下载:Windows平台shellcode免杀加载器下载项目特点1:自带四种加载方式2:可自行拓展加载方式3:支持两种加密技术,分别位3des加密和凯撒密......
  • 【MySQL】:事务
    朋友们、伙计们,我们又见面了,本期来给大家带来数据库事务的知识点,如果看完之后对你有一定的启发,那么请留下你的三连,祝大家心想事成!C语言专栏:C语言:从入门到精通数据结构专栏:数据结构个 人 主 页 :stackY、C++专栏  :C++Linux专 栏 :Linux目录1.......
  • 使用 pdf.js 通过文件流方式加载pdf文件
    关于Pdf.js的基础知识,请参考我的博客 使用pdf.js在网页中加载pdf文件使用pdf.js跨域问题的处理方法    上面两篇博客中介绍的内容都是基于直接加载远程服务器中静态PDF文件(即URL地址)来渲染PDF的,实际业务场景中,如与第三方系统对接过程中,第三方系统不直接公开......
  • 深入理解 Three.js 加载器:如何导入外部模型(GLTF、OBJ、FBX)
    深入理解Three.js加载器:如何导入外部模型(GLTF、OBJ、FBX)Three.js提供了强大的加载器系统,可以轻松地将外部模型(如GLTF、OBJ、FBX等格式)加载到场景中,为你的3D项目增添真实感。在这篇文章中,我们将深入讲解Three.js加载器的使用方法,并结合实际案例展示如何在Vue项......