python使用多线程查询数据库的实现示例

python使用多线程查询数据库的实现示例使用多线程查询数据库的实现示例

主要介绍了python使用多线程查询数据库的实现示例，文中通过示例代码介绍的非常详细，对大家的学习或者

工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧

一一.背景：背景：

当数据量过大时，一个程序的执行时间就会主要花费在等待单次查询返回结果，在这个过程中cpu无疑是处于等待io的空

闲状态的，这样既浪费了cpu资源，又花费了大量时间（当然这里主要说多线程，批量查询不在考虑范围，总会存在不能批量

查询的情况），在这种非密集型运算（及大量占用cpu资源）的情况下在python中无疑运用多线程是一个非常棒的选择。

二二.知识点：知识点：

python多线程：在程序等待io的时间里调用多线程去数据库执行查询操作。

队列：这个就是数据结构里面的知识了，一般队列的常用模式先进先出队列。（这里主要用的是队列取一个数就少一个数

的原理，其实用列表也可以实现，他的先进先出主要强调的是一个顺序关系，这一点到没用上，就当是练练手了）

三三.两段代码作比较：两段代码作比较：

数据库的截图：

第一段代码：正常循环查询并打印出执行时间

#!/usr/bin/python

# -*- coding=utf-8 -*-

import time

import threading

user = 'root'

port = 3306

password = '123456'

db = 'test'

charset = 'utf8'

limit_count = 3 # 最低预启动数据库连接数量

pool = PooledDB(MySQLdb, limit_count, maxconnections=15, host=host, user=user, port=port, passwd=password, db=db, charset=charset,

use_unicode=True, cursorclass=DictCursor)

return pool

start = time.time()