Python编程:DBUtils管理数据库连接池

举报
彭世瑜 发表于 2021/08/13 23:18:28 2021/08/13
【摘要】 每次执行一个sql的时候都单独建立一个mysql连接,执行完就close掉,很明显这样的问题在于,频繁连接,断开mysql,这样是相当消耗系统资源的,而且增加了mysql连接失败的几率,所以万一哪个线程没有连接成功 这个线程也over了。 连接池原理 在程序创建连接的时候,可以从一个空闲的连接中获取,不需要重新初始化连接,提升获取连接的速度关闭连接的时候,把连接...

每次执行一个sql的时候都单独建立一个mysql连接,执行完就close掉,很明显这样的问题在于,频繁连接,断开mysql,这样是相当消耗系统资源的,而且增加了mysql连接失败的几率,所以万一哪个线程没有连接成功 这个线程也over了。

连接池原理

这里写图片描述

  1. 在程序创建连接的时候,可以从一个空闲的连接中获取,不需要重新初始化连接,提升获取连接的速度
  2. 关闭连接的时候,把连接放回连接池,而不是真正的关闭,所以可以减少频繁地打开和关闭连接

安装

pip install DBUtils
  
 
  • 1

下载地址:https://pypi.org/project/DBUtils/

参数解释:

creator, # 使用链接数据库的模块 
mincached=0, # 初始化时,链接池中至少创建的空闲的链接,0表示不创建
maxcached=0, # 链接池中最多闲置的链接,0和None不限制
maxshared=0, # 链接池中最多共享的链接数量,0和None表示全部共享。PS: 无用,因为pymysql和MySQLdb等模块的threadsafety都为1,所有值无论设置为多少,_maxcached永远为0,所以永远是所有链接都共享。 
maxconnections=0,   # 连接池允许的最大连接数,0和None表示不限制连接数
blocking=False, # 连接池中如果没有可用连接后,是否阻塞等待。True,等待;False,不等待然后报错
maxusage=None, # 一个链接最多被重复使用的次数,None表示无限制
setsession=None, # 开始会话前执行的命令列表。如:["set datestyle to ...", "set time zone ..."]
reset=True,
failures=None, 
ping=1, # ping MySQL服务端,检查是否服务可用。# 如:0 = None = never, 1 = default = whenever it is requested, 2 = when a cursor is created, 4 = when a query is executed, 7 = always

# 数据库设置,同pymysql
host='localhost', 
port=3306,
db='mydata',
user="root",
passwd="123456",
charset='utf8'
  
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18
  • 19

代码示例

# -*- coding: utf-8 -*-

# @File : dbutils_demo.py
# @Date : 2018-08-15
# @Author  : Peng Shiyu

import pymysql
from DBUtils.PooledDB import PooledDB

pool = PooledDB( creator=pymysql,  # 使用链接数据库的模块 host='localhost', port=3306, db='mydata', user="root", passwd="123456", charset='utf8'
)


class Connect(object): def __init__(self, pool_obj): self.conn = pool_obj.connection() self.cursor = self.conn.cursor() def execute(self, query, args=None): self.cursor.execute(query, args) return self.cursor.fetchall() def __del__(self): self.cursor.close() self.conn.close()


if __name__ == '__main__': con = Connect(pool) sql = "show tables" ret = con.execute(sql) print(len(ret))

  
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18
  • 19
  • 20
  • 21
  • 22
  • 23
  • 24
  • 25
  • 26
  • 27
  • 28
  • 29
  • 30
  • 31
  • 32
  • 33
  • 34
  • 35
  • 36
  • 37
  • 38
  • 39
  • 40

参考:
Python-DBUtils 使用mysql数据库连接池提升效率

文章来源: pengshiyu.blog.csdn.net,作者:彭世瑜,版权归原作者所有,如需转载,请联系作者。

原文链接:pengshiyu.blog.csdn.net/article/details/81738359

【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。