Gevent—-非官方的python协程库

  • 2019 年 10 月 6 日
  • 笔记

gevent是一个基于libev的并发库。它为各种并发和网络相关的任务提供了整洁的API。 嗯,确实很简洁,很易使用。待会我们就见识到了。 同步IO 我们知道对于网络请求这种IO bound的场景来说,最怕的就是某个请求阻塞了其余的操作,让并发性大大降低。

首先看一下他自己的介绍:

gevent是一个基于libev的并发库。它为各种并发和网络相关的任务提供了整洁的API。

嗯,确实很简洁,很易使用。待会我们就见识到了。

我们正常情况编程的情况下一般是同步IO,例如我们现在访问百度50次:

import requests  url = 'http://www.baidu.com'  for i in range(50):      print("{}: {}".format(i, requests.get(url)))

终端输入:time python test.py运行代码

运行结果:

接下来使用gevent的方式(异步IO)访问百度50次

import requests  import gevent  import gevent.monkey as gm    gm.patch_socket()  url = 'http://www.baidu.com'  def get_baidu(i):      print('{}:{}'.format(i, requests.get(url)))    tasks = [gevent.spawn(get_baidu, i)for i in range(50)]gevent.joinall(tasks)

终端输入:time python test.py运行代码

运行结果:

两者结果对比相差近4倍!

但是对应的也能发现差别,那就是访问的顺序被捣乱了,它是按照随机顺序排列的,也就是说,哪个协程先抢到资源,他就会先去运行,这也说明整个请求是异步非阻塞的。

同步操作下花了4秒的时间,但是利用gevent协程的异步操作只需要0.9秒!并且随着次数的增多,两个操作之间的差距还将增大。