python 异步IO数据库队列缓存

Posted 2020-08-13

协程

协程，又称微线程，纤程。英文名Coroutine。一句话说明什么是线程：协程是一种用户态的轻量级线程。

协程拥有自己的寄存器上下文和栈。协程调度切换时，将寄存器上下文和栈保存到其他地方，在切回来的时候，恢复先前保存的寄存器上下文和栈。因此：

协程能保留上一次调用时的状态（即所有局部状态的一个特定组合），每次过程重入时，就相当于进入上一次调用的状态，换种说法：进入上一次离开时所处逻辑流的位置。

 

协程的好处：

• 无需线程上下文切换的开销
• 无需原子操作锁定及同步的开销
• 方便切换控制流，简化编程模型
• 高并发+高扩展性+低成本：一个CPU支持上万的协程都不是问题。所以很适合用于高并发处理。

缺点：

• 无法利用多核资源：协程的本质是个单线程,它不能同时将 单个CPU 的多个核用上,协程需要和进程配合才能运行在多CPU上.当然我们日常所编写的绝大部分应用都没有这个必要，除非是cpu密集型应用。
• 进行阻塞（Blocking）操作（如IO时）会阻塞掉整个程序

Greenlet

 1 from greenlet import greenlet
 2 
 3 def test1():
 4     print(1)
 5     gr2.switch()
 6     print(4)
 7     gr2.switch()
 8 def test2():
 9     print(2)
10     gr3.switch()
11     print(5)
12     gr3.switch()
13 def test3():
14     print(3)
15     gr1.switch()
16     print(6)
17 gr1 = greenlet(test1)
18 gr2 = greenlet(test2)
19 gr3 = greenlet(test3)
20 gr1.switch()
21 
22    

View Code

Gevent 

Gevent 是一个第三方库，可以轻松通过gevent实现并发同步或异步编程，在gevent中用到的主要模式是Greenlet, 它是以C扩展模块形式接入Python的轻量级协程。 Greenlet全部运行在主程序操作系统进程的内部，但它们被协作式地调度。

 1 import gevent
 2 
 3 def test1():
 4     print(1)
 5     gevent.sleep(2)
 6     print(4)
 7 def test2():
 8     print(2)
 9     gevent.sleep(1)
10     print(5)
11 def test3():
12     print(3)
13     gevent.sleep(0)
14     print(6)
15 gevent.joinall([
16     gevent.spawn(test1),
17     gevent.spawn(test2),
18     gevent.spawn(test3),
19 ])

View Code