百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术教程 > 正文

python3.13下使用数据库连接池

mhr18 2025-01-07 14:17 81 浏览 0 评论

Python 3.13 Beta 1 来啦!

新特性一览

  1. 交互式解释器升级,源自 PyPy,更智能,更懂你!
  2. 实验性 JIT 编译器,性能提升,代码运行更快!
  3. 激动人心的无 GIL 版本,多线程并发新体验!
  4. 垃圾回收更高效,增量式回收,内存管理更上一层楼!
  5. 新增类型注解,代码更规范,开发更安心!

也就是说从这个版本开始python开始了无GIL的时代,实现了真多线程并发。对于数据库开发的小伙伴来说很遗憾的是Cx_Oracle驱动包不再支持,使用dbutils的PooledDB来创建Oracle连接池不再可行;好消息是可以继续使用oracledb,而这个包更加高级,自带连接池。要适应新技术的发展,要对原来的代码进行改进。

  1. 对于项目数据库连接池的开发,必须使用单例模式。编制一个单例“原类”,继承此类的所有类都是单例。
import threading

class Single:
    '''
    单例模板类,继承该类子类均为单例模式
    '''
        _lock = threading.Lock()                        # python 的单例模式
    
    def __new__(cls, *args, **kw):
        while not hasattr(cls, "_instance"):           # 适应多线程,双循环确认只创建1个实例:
            with cls._lock:
                while not hasattr(cls, "_instance"):
                    cls._instance = super().__new__(cls)
        return cls._instance
  1. 为了使用连接池,还必须保证所有的对象共享一个连接池,编一个基础MyDatabase类。
# import os
import pymysql
# import cx_Oracle as oracle                       #python3.10之后的版本不再支持
import oracledb as oracle                          #python3.10之后推荐使用,已经自带连接池
# oracle.init_oracle_client(lib_dir=r"C:\Program Files (x86)\Oracle\Instant Client\bin")  # 针对oracle11.2的老版本需要采用这种厚模式
import threading
# from DBUtils.PooledDB import PooledDB                   # 使用数据库连接池1.3
from dbutils.pooled_db import PooledDB                    # 使用数据库连接池2.0,3.0以后对数据库参数大小写敏感,比如utf8不能写成UTF8
from abc import ABCMeta, abstractmethod

class MyDataBase(Single):           # 继承一个单例类,就变成单例
    '''
    数据库基类,单例,必须被继承实现具体查寻操作
    '''
    __metaclass__ = ABCMeta
    _pool = None                    				# 连接池
    _pool_lock = threading.Lock()   # 连接池线程锁
    
    @classmethod
    def __init__(cls, db_config):
        '''
        单例模式建立连接池
        '''
        while cls._pool is None:  # 适应多线程,双层循环确认pool对象没有被创建才创建,否则啥也不干
            with cls._pool_lock:                       # 加线程锁
                while cls._pool is None:
                    try:
                        cls.create_Pool(db_config)                                             # 各类以自己的方式创建连接池
                    except Exception as e:
                        MyLogger.error(cls.__name__ + '未能正常创建连接池!请检查网络或服务器配制是否正确!' + str(e), __name__)

		@classmethod
    def getConnect(cls):		# 基类获取链接的方法
        '''
        从连接池拿出一个链接并初始化光标
        :return: 数据库链接和光标
        '''
        if cls._pool:
            conn = cls._pool.connection()
            cursor = conn.cursor()
            return conn, cursor
        return None, None
  1. MySQL依旧使用PooledDB创建连接池,而oracledb自带连接池,并且oracledb获取链接的方式也不一样了。必须在子类各自实现连接池创建和链接获取方式。
class MySql(MyDataBase):  # 继承一个单例类,就变成单例
    """MySQL数据库链接工具类"""

    def __init__(self, databaseName='MySQL'):
        '''
        具体数据库类读取配制信息,并用父类初始化连接池
        '''
        db_config = self.loadDBconfig(databaseName)					# 获取数据库配制信息
        super().__init__(db_config)

		@classmethod
    def create_Pool(cls, db_config):
        cls._pool = PooledDB(
            creator=pymysql,                # 对应的数据库驱动包
            mincached=5,                    # 连接池里面初始的空闲链接
            maxcached=10,                   # 最大的空闲链接数量
            maxshared=10,                   # 最大的允许共享的连接数
            maxusage=None,                  # 单个链接最大可以被复用的次数(默认未0/None, 代表不限制复用)
            maxconnections=None,            # 最大的允许的连接数(默认为0/None,代表多少链接都行)
            blocking=True,                  # 确定超过最大连结束后的行为,true则阻塞等待有空闲链接,默认为报告错误
            **db_config)                    # 数据库链接参数
        
        
class Oracle(MyDataBase):
    os.environ['NLS_LANG'] = 'SIMPLIFIED CHINESE_CHINA.ZHS16GBK'        # 解决cx_Oracle连接Oracle的乱码问题

    def __init__(self, databaseName='Oracle1'):
        '''
        具体数据库类负责读取配制信息,并用父类初始化连接池
        '''
        db_config = self.loadDBconfig(databaseName)
        oracle_path = ConfigUtil.getPath('oracle_dir')
        # oracle.init_oracle_client(lib_dir=r"C:\Program Files (x86)\Oracle\Instant Client\bin")
        oracle.init_oracle_client(lib_dir=oracle_path)
        super().__init__(db_config)

		@classmethod
    def create_Pool(cls, db_config):
        cls._pool = oracle.create_pool(         # 以该类驱动包工具,创建连接池
            min=8,                              # 连接池里面初始的空闲链接
            max=16,                             # 最大的空闲链接数量
            increment=1,                        # 自增数
            **db_config)                        # 数据库链接参数

    def getConnect(cls):                        # 由于oracledb 获取conn的方式不同,子类必须覆盖父类同名函数
        if cls._pool:
            conn = cls._pool.acquire()
            cursor = conn.cursor()
            return conn, cursor
        return None, None

相关推荐

Java面试宝典之问答系列(java面试回答)

以下内容,由兆隆IT云学院就业部根据多年成功就业服务经验提供:1.写出从数据库表Custom中查询No、Name、Num1、Num2并将Name以姓名显示、计算出的和以总和显示的SQL。SELECT...

ADG (Active Data Guard) 数据容灾架构下,如何配置 Druid 连接池?

如上图的数据容灾架构下,上层应用如果使用Druid连接池,应该如何配置,才能在数据库集群节点切换甚至主备数据中心站点切换的情况下,上层应用不需要变动(无需修改配置也无需重启);即数据库节点宕机/...

SpringBoot多数据源dynamic-datasource快速入门

一、简介dynamic-datasourc是一个基于SpringBoot的快速集成多数据源的启动器,其主要特性如下:支持数据源分组,适用于多种场景纯粹多库读写分离一主多从混合模式。支持...

SpringBoot项目快速开发框架JeecgBoot——项目简介及系统架构!

项目简介及系统架构JeecgBoot是一款基于SpringBoot的开发平台,它采用前后端分离架构,集成的框架有SpringBoot2.x、SpringCloud、AntDesignof...

常见文件系统格式有哪些(文件系统类型有哪几种)

PART.01常见文件系统格式有哪些常见的文件系统格式有很多,通常根据使用场景(Windows、Linux、macOS、移动设备、U盘、硬盘等)有所不同。以下是一些主流和常见的文件系统格式及其特点:一...

Oracle MySQL Operator部署集群(oracle mysql group by)

以下是使用OracleMySQLOperator部署MySQL集群的完整流程及关键注意事项:一、部署前准备安装MySQLOperator通过Helm安装Operator到Ku...

LibreOffice加入"转向Linux"运动

LibreOffice项目正准备削减部分Windows支持,并鼓励用户切换到Linux系统。自Oracle放弃OpenOffice后,支持和指导LibreOffice开发的文档基金会对未来有着明确的观...

Oracle Linux 10发布:UEK 8.1、后量子加密、增强开发工具等

IT之家6月28日消息,科技媒体linuxiac昨日(6月27日)发布博文,报道称OracleLinux10正式发布,完全二进制兼容(binarycompatibility...

【mykit-data】 数据库同步工具(数据库同步工具 开源)

项目介绍支持插件化、可视化的数据异构中间件,支持的数据异构方式如下MySQL<——>MySQL(增量、全量)MySQL<——>Oracle(增量、全量)Oracle...

oracle关于xml的解析(oracle读取xml节点的属性值)

有时需要在存储过程中处理xml,oracle提供了相应的函数来进行处理,xmltype以及相关的函数。废话少说,上代码:selectxmltype(SIConfirmOutput).extract...

如何利用DBSync实现数据库同步(通过dblink同步数据库)

DBSync是一款通用型的数据库同步软件,能侦测数据表之间的差异,能实时同步差异数据,从而使双方始终保持一致。支持各种数据库,支持异构同步、增量同步,且提供永久免费版。本文介绍其功能特点及大致用法,供...

MYSQL存储引擎InnoDB(八十):InnoDB静态数据加密

InnoDB支持独立表空间、通用表空间、mysql系统表空间、重做日志和撤消日志的静态数据加密。从MySQL8.0.16开始,还支持为模式和通用表空间设置加密默认值,这允许DBA控制在这些模...

JDK高版本特性总结与ZGC实践(jdk高版本兼容低版本吗)

美团信息安全技术团队核心服务升级JDK17后,性能与稳定性大幅提升,机器成本降低了10%。高版本JDK与ZGC技术令人惊艳,且JavaAISDK最低支持JDK17。本文总结了JDK17的主要...

4 种 MySQL 同步 ES 方案,yyds!(两个mysql数据库自动同步的方法)

本文会先讲述数据同步的4种方案,并给出常用数据迁移工具,干货满满!不BB,上文章目录:1.前言在实际项目开发中,我们经常将MySQL作为业务数据库,ES作为查询数据库,用来实现读写分离,...

计算机Java培训课程包含哪些内容?其实就这六大块

不知不觉秋天已至,如果你还处于就业迷茫期,不如来学习Java。对于非科班小白来说,Java培训会更适合你。提前了解下计算机Java培训课程内容,会有助于你后续学习。下面,我就从六个部分为大家详细介绍...

取消回复欢迎 发表评论: