mysqlclient和pymysql如何选择?_gevent_waiter的使用

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/u011510825/article/details/86632598

    使用python连接mysql,是需要三方包的,目前主流的方式就是pymysql 和 mysqlclient(也就是Python3版本的MySQLdb)。还有一个cymysql(fork of pymysql with optional C speedups)

1. 两个库的作者是同一个人INADA Naoki, pip库邮箱都指向mailto:[email protected]

2. PyMySQL的代码人员methane说mysqlclient速度更快及PyMySQL的应用场景

    那么,我们应该如何选择呢?首先,需要了解下这两个包的大概。

    一、pymysql

      1)纯Python实现的,安装简单(直接pip安装)

      2)  由于纯Python实现的,可以很好的跟gevent框架结合

二、mysqlclient

    1)是一个C扩展模块,编译安装可能会导致报各种错误,明显没有pymysql方便

    2)速度快;

对比上面,你就应该会清楚,pymysql的性能是比mysqlclient较差的,但是pymysql简单易使用。一般你都要选择mysqlclient除非以下三种情况:

1)你不能用libmysqlclient出于某种原因

2)你想使用gevent or eventlet 配合

3)  考虑mysql协议兼容性

原文是这样的:

mysqlclient-python is much faster than PyMySQL.
When to use PyMySQL is:

You can't use libmysqlclient for some reason
You want to use monkeypatched socket of gevent or eventlet
You wan't to hack mysql protocol

上面的原因,导致目前使用pymysql的程序员远超过mysqlclient,特别是第二条,现在的python站点,基本都要用gevent或者eventlet吧。

强大的mysqlclient已经解决了,mysqlclient目前也是可以使用gevent了。直接上代码:

import MySQLdb
import gevent.hub

def _gevent_waiter(fd, hub=gevent.hub.get_hub()):
    hub.wait(hub.loop.io(fd, 1))




conn = MySQLdb.connect(
                db=self.db,
                host=self.host if not self.ssh else LOOPBACK_ADDRESS,
                port=self.port if not self.ssh else int(self.ssh.local_bind_port),
                user=self.user,
                password=self.passwd,
                charset=self.charset,
                connect_timeout=self.connect_timeout,
                cursorclass=DictCursor,
                use_unicode=True,
                waiter=_gevent_waiter,
            )


上面的连接方式,其他参数不多解释了,就说waiter吧,有了这个相当于mysqlclinet可以完美配合gevent了。

不了解那个_gevent_waiter,可以看看这篇文章  gevent hub 。

那么,我们怎么测试呢?测试过程比较简单,起一个单进程的 web服务,连接数据库的时候查询的时候,在数据库执行time.sleep 20秒,这个时候看其他请求这个 web服务还能处理请求不,用了waiter=_gevent_waiter完美啊。。。

有了这个,一个拥有大量数据库查询服务的系统,我可能再也不会用tornado了。。

github地址:

https://github.com/PyMySQL/mysqlclient-python

https://github.com/PyMySQL/PyMySQL/

目前pymysql和mysqlclient的各项指标对比:

https://python.libhunt.com/compare-mysqlclient-python-vs-pymysql

很寒心啊,,,大多程序猿还是比较怕麻烦,选择了简单易用但是性能较差的pymysql......pymysql比MySQLdb慢太多了,所以大项目感觉pymysql还是有点鸡肋啊,在此建议,使用MySQLdb。

猜你喜欢

转载自blog.csdn.net/u011510825/article/details/86632598