关于Python中yield的一些个人见解

Posted 2020-09-23

# 样例代码
def yield_test(n):
    for i in range(n):
        yield call(i)
        print("i=",i)
    #做一些其它的事情
    print("do something.")
    print("end.")

def call(i):
    return i*2

#使用for循环
for i in yield_test(5):
    print(i,",")

最近在scrapy爬虫方面接触了很多yield，找了很多网上的资料，很多大神都给出了很透彻的理解方法。但是由于我是菜鸟一个，对于一些很专业的解释看得似懂非懂。于是乎找了一段代码，自己在pycharm中一步步调试，终于弄懂了yield的工作原理。

样例代码中定义了两个方法yield_test以及call，将会在接下来的迭代中调用。

首先，我们将一个参数“5”传进yield_test方法中，代码将会执行到以下步骤。

for i in range(n):

代码将会生产一个[0,1,2,3,4]的列表，将会在该列表中进行迭代，此时i=0，开始进行迭代

代码运行到

yield call(i)

时，将会将i=0传入到 call()方法中，返回一个运算结果"0"

接下来生成器yield将会执行一个类似return的操作，将i=0返回到

for i in yield_test(5):
    print(i,",")

中，此时将会执行 print(i,",")语句，在Console窗口输出

完成以上的结果输出之后，由于yield的机制，下一次迭代时，从上一次迭代遇到的yield后面的代码开始执行

此时代码将会返回到以下语句中继续迭代

print("i=",i)

Console窗口将会继续打印出第二条结果

执行完毕之后，将会继续在yield_test方法中进行第二次迭代

此时i的值将会由0变为1   PS：前面生成的列表就是[0,1,2,3,4]，刚开始是0，下一次迭代就是1啦

yield将会重复进行迭代，将1传到call()方法，计算完成后返回到主循环里面继续输出  print(i,",")  然后在根据yield的特性返回到  print("i=",i)  输出到Console窗口中，以此类推。

 

总结，引用其他大神总结，yield的特性如下：

1. 通常的for...in...循环中，in后面是一个数组，这个数组就是一个可迭代对象，类似的还有链表，字符串，文件。它可以是mylist = [1, 2, 3]，也可以是mylist = [x*x for x in range(3)]。
   它的缺陷是所有数据都在内存中，如果有海量数据的话将会非常耗内存。
2. 生成器是可以迭代的，但只可以读取它一次。因为用的时候才生成。比如 mygenerator = (x*x for x in range(3))，注意这里用到了()，它就不是数组，而上面的例子是[]。
3. 我理解的生成器(generator)能够迭代的关键是它有一个next()方法，工作原理就是通过重复调用next()方法，直到捕获一个异常。可以用上面的mygenerator测试。
4. 带有 yield 的函数不再是一个普通函数，而是一个生成器generator，可用于迭代，工作原理同上。
5. yield 是一个类似 return 的关键字，迭代一次遇到yield时就返回yield后面的值。重点是：下一次迭代时，从上一次迭代遇到的yield后面的代码开始执行。
6. 简要理解：yield就是 return 返回一个值，并且记住这个返回的位置，下次迭代就从这个位置后开始。
7. 带有yield的函数不仅仅只用于for循环中，而且可用于某个函数的参数，只要这个函数的参数允许迭代参数。比如array.extend函数，它的原型是array.extend(iterable)。
8. send(msg)与next()的区别在于send可以传递参数给yield表达式，这时传递的参数会作为yield表达式的值，而yield的参数是返回给调用者的值。——换句话说，就是send可以强行修改上一个yield表达式值。比如函数中有一个yield赋值，a = yield 5，第一次迭代到这里会返回5，a还没有赋值。第二次迭代时，使用.send(10)，那么，就是强行修改yield 5表达式的值为10，本来是5的，那么a=10
9. send(msg)与next()都有返回值，它们的返回值是当前迭代遇到yield时，yield后面表达式的值，其实就是当前迭代中yield后面的参数。
10. 第一次调用时必须先next()或send(None)，否则会报错，send后之所以为None是因为这时候没有上一个yield(根据第8条)。可以认为，next()等同于send(None)。

 

以上是个人对yield的一些个人简介，如有表达错误，希望指正。

其实很多看起来很难的东西，把它抄过来，然后在调试模式中一步一步地去观察代码的运行情况，观察变量的变化，这样对理解一样新事物会有很大的帮助（很显然是废话 = =！）