百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术教程 > 正文

Apache Commons Pool——优化你的java内存

mhr18 2025-05-28 18:57 52 浏览 0 评论

大家好,我是吉森。我会持续分享一些开发技巧、经验和技术,如果你也热爱各种开发技术,欢迎关注我。

今天我们继续介绍Apache Commons工具包,今天的主角是:Commons Pool。简单地说,它是对象池技术的一套实现。

入门级介绍

开始之前,有必要啰嗦几句什么是对象池。

对象池,顾名思义,是一个存放对象的池子。我们使用对象的时候,可以从池中借出对象,完成任务后把对象归还回池中。对象池可以算做一种设计模式,它是单例模式的变种。单例模式是我们在整个应用中只能创建一个对象,而对象池模式是我们在应用中可以创建有限多个对象。

为什么用对象池?很多用来代表资源的大对象,它们在创建和销毁时的内存消耗都比较大,这种情况下我们垃圾收集器的负担很重。一旦创建了过多的资源对象而没有及时回收,就可能造成内存溢出 (OOM)问题。

下面就让我们关注一下通过Apache Commons Pool工具怎么创建对象池。

示例代码

// 创建一个通用的对象池
ObjectPool<Object> pool = new GenericObjectPool<>(new BasePooledObjectFactory<>() {
    // 创建对象的方法                                              
    @Override
    public Object create() {
        return new Object();
    }

    // 将对象包装成池中的对象 
    @Override
    public PooledObject<Object> wrap(Object obj) {
        return new DefaultPooledObject<>(obj);
    }
});

Object obj;
try {
    // 从对象池中借中对象
    obj = pool.borrowObject();
    try {
        // 使用对象
        doSomething(obj);
    } catch(Exception e) {
        // 让对象失效
        pool.invalidateObject(obj);
        // do not return the object to the pool twice
        obj = null;
    } finally {
        // 返还对象
        if(null != obj) {
            pool.returnObject(obj);
        }
    }
} catch(Exception e) {
    // 借出对象失败的处理
    e.printStackTrace();
}

进一步分析

从上面的示例代码中,我们可以看出,在对象池创建过程中的两个关键接口是ObjectPoolPooledObjectFactory

ObjectPool就是对象池,创建时需要加上泛型表明对象池中存储对象的类型,其中最常用的实现类是GenericObjectPool。我们可以通过在构造器中额外加入一个GenericObjectPoolConfig对象来配置对象池,主要配置项包括最小空闲对象数、最大空闲对象数以及最大总对象数。

创建GenericObjectPool时,我们需要重写两个方法,即createwrap。我们注意到create方法没有任何参数,说明对象池中的对象是完全一样的,即对象之间是equals的关系。wrap方法是告诉程序我们怎么将对象包装为池化对象,通常使用默认方式即可。

PooledObjectFactory是用于定义对象池中对象的生命周期方法的接口。换句话上,对象池创建、激活、销毁对象等过程其实都是调用PooledObjectFactory中的方法来实现的。主要的生命周期方法包括:

// 创建对象
PooledObject<T> makeObject() throws Exception;

// 销毁对象
void destroyObject(PooledObject<T> p) throws Exception;

// 确保对象有效
boolean validateObject(PooledObject<T> p);

// 重新初始化对象
void activateObject(PooledObject<T> p) throws Exception;

// 将对象重置为未初始化的状态
void passivateObject(PooledObject<T> p) throws Exception;

从池中取出对象和归还对象就比较简单了,直接调用borrowObjectreturnObject方法即可,借出对象的时候先检查闲置的对象是否可用,再检查所有对象是否要用,如果都不可用并且池中对象还未达到最大数量,则在池中创建新的对象。

其他对象池

除了GenericObjectPool外,Commons Pool还提供了其他几种对象池的对象。

  1. SoftReferenceObjectPool,即软引用对象池。我们都知道,在JVM中,软引用对象是指GC可以根据内存需要自主决定是否清理的对象。因此这种对象池不存在容量已满的情况,内存不足时,池中的对象会被GC回收。
  2. KeyedObjectPool,即有主键的对象池。前面提到GenericObjectPool中所有的对象都是一样的,KeyedObjectPool则是通过不同的key来标记不同的对象。KeyedObjectPool是一个接口,根据实现类不同,可以是一个key对应一个对象或多个对象。
  3. SynchronizedObjectPool,顾名思义,是线程安全的对象池。它是一个内部类,不能直接创建,需要通过PoolUtils.synchronizedPool方法将现有的对象池转为SynchronizedObjectPool。如果原对象池是KeyedObjectPool,则会包装为SynchronizedKeyedObjectPool。
  4. ErodingObjectPool,指不断衰减的对象池。它也是一个内部类,表示对象池的size将在闲置对象不再需要时不断地减少。不能直接创建,需要通过PoolUtils.erodingPool方法将现有的对象池转为ErodingObjectPool。这种线程池的效率比较高,通常采用FIFO(先进先出)的顺序来移除对象。

应用场景

最后说说什么时候使用对象池,以及对象池的优缺点。

对象池主要减少了创建对象和销毁对象的开销,因此一定是对象创建和销毁内存开销较大的情况下,才需要使用对象池,这些情况主要包括网络连接、数据库连接、图形图像处理等。

数据库连接池、线程池等都属于对象池,但是它们都有更特定的解决方案,通常不会使用Apache Commons Pool。根据maven网站上的统计,应用了Commons Pool的知名第三方库主要包括jedis (redis连接驱动)、Spring data redis (spring连接redis)、lettuce (redis连接驱动)、ActiveMQ Pool (消息队列)、Jmeter components (压力测试)、RabbitMQ backend (消息队列)等。可以看出,这些应用的普遍特点就是内存开销比较大。

因此,我们也应该仅在创建内存开销较大的对象时,主动使用对象池。

敲黑板啦~

引入Commons-Pool

<!-- https://mvnrepository.com/artifact/org.apache.commons/commons-pool2 -->
<dependency>
    <groupId>org.apache.commons</groupId>
    <artifactId>commons-pool2</artifactId>
    <version>2.9.0</version>
</dependency>

参考资料

Apache Commons官方网站

今天介绍的内容就到这里了,感谢观看。

什么,还没看够?关注我看更多技术干货~

相关推荐

如何通过 Redis 日志排查连接超时问题

Redis是一种高性能的内存数据存储服务,但在高并发或误配置情况下,可能会出现连接超时问题。借助Redis日志,可以快速定位并解决连接超时的根本原因。以下是具体的排查和解决步骤:1.什么是R...

给你1亿的Redis key,如何高效统计?

前言有些小伙伴在工作中,可能遇到过这样的场景:老板突然要求统计Redis中所有key的数量,你随手执行了KEYS*命令,下一秒监控告警疯狂闪烁——整个Redis集群彻底卡死,线上服务大面积瘫痪。今天...

Redis分布式锁的安全性分析与实践指南

一、Redis分布式锁的核心原理Redis分布式锁通过SETNX(SetifNotExists)和EXPIRE(Expire)指令实现原子性操作,结合UUID生成唯一标识符,确保锁的互斥性和安全...

高可用Redis分布式锁:秒杀系统中的锁战

引言在分布式系统中,“程序猿的终极武器是并发控制”。当多个服务实例同时访问共享资源时,如何避免数据不一致和重复操作?答案是分布式锁。Redis凭借其高性能和原子性操作,成为实现分布式锁的首选方案。...

Redis分布式锁(redis分布式锁解决超卖)

场景描述简单模拟一个高并发库存扣减场景,商品库存加载到Redis缓存,如:127.0.0.1:6379>setproduct:stock:101200无锁状态操作从缓存中获取对应商品的库存...

Redis 分布式锁和 ZooKeeper分布式锁

Redis分布式锁和ZooKeeper(简称zk)分布式锁都是用来解决在分布式系统中多个节点之间竞争资源的问题。它们各自有不同的特点和适用场景。Redis分布式锁Redis实现分布式锁主要是...

Redis vs ZooKeeper锁:高并发下的生死对决,谁才是最终赢家?

在分布式系统中,锁是控制资源访问的重要机制。Redis和ZooKeeper作为两种主流的分布式锁实现方案,各有优劣。本文将从原理、性能、代码实现三个维度进行硬核对比,助你做出最佳技术选型。一、原理对比...

说说Redis的大key(redis key大小限制)

一句话总结Redis大key指存储超大值(如字符串过大、集合元素过多)的键。主要成因包括:1.设计不合理,未拆分数据结构;2.业务需求(如缓存整页数据);3.数据持续积累未清理;4.使用不当的集合类型...

PHP Laravel框架底层机制(php框架的底层原理)

当然可以,Laravel是最受欢迎的PHP框架之一,以优雅的语法和丰富的生态而闻名。尽管开发体验非常“高端”,它的底层其实是由一系列结构清晰、职责分明的组件构成的。下面我从整体架构、核心流程、...

PHP性能全面优化-值得收藏(php优化网站性能)

PHP项目卡顿频发,老技巧失灵?隐藏漏洞竟在代码循环里。上周公司服务器突然开始卡顿,测试发现用户请求响应时间翻倍。我们先按以前学的方法做了基准测试,用AB工具压测时发现2000并发就有5%错误,换成S...

PHP+UniApp:低成本打造外卖系统横扫App+小程序+H5全平台

在餐饮行业数字化转型中,外卖系统开发常面临两大痛点:高昂的开发成本(需独立开发App、小程序、H5)和多端维护的复杂性。PHP+UniApp的组合通过技术复用与跨平台能力,为中小商家和开发者提供了“降...

从需求到上线:PHP+Uniapp校园圈子系统源码的架构设计与性能优化

一、需求分析与架构设计1.核心功能需求用户体系:支持手机号/微信登录、多角色权限(学生、教师、管理员)。圈子管理:支持创建/加入兴趣圈子(如学术、电竞)、标签分类、动态发布与审核。实时互动:点赞、评...

PHP 8.0性能翻3倍?四年亲测:这些项目升了哭晕!

2020年那个感恩节,当PHP8.0带着“性能翻倍”的豪言横空出世时,无数程序员连夜备份代码准备升级。四年过去了,那些宣称“性能提升3倍”的项目,真的跑出火箭速度了吗?还记得当时铺天盖地的宣传吗?“...

我把 Mac mini 托管到机房了:一套打败云服务器的终极方案

本内容来源于@什么值得买APP,观点仅代表作者本人|作者:薯仔不爱吃薯仔我把我积灰的Macmini托管到机房了,有图有真相。虽然画质又渣又昏暗,但是!这就是实锤。作为开发者,谁不想拥有个自己的服...

从phpstudy到Docker:我用一个下午让开发效率翻倍的实战指南

一、为什么放弃phpstudy?上周三下午,我花了3小时将本地开发环境从phpstudy迁移到Docker,没想到第二天团队反馈:环境部署时间从2小时压缩到5分钟,跨设备协作bug减少70%。作为一个...

取消回复欢迎 发表评论: