|
| 1 | + |
| 2 | +# yield |
| 3 | +[csdn_yield](https://blog.csdn.net/mieleizhi0522/article/details/82142856/) |
| 4 | + |
| 5 | +```py |
| 6 | +#encoding:UTF-8 |
| 7 | +def yield_test(n): |
| 8 | + for i in range(n): |
| 9 | + yield call(i) |
| 10 | + print("i=",i) |
| 11 | + #做一些其它的事情 |
| 12 | + print("do something.") |
| 13 | + print("end.") |
| 14 | + |
| 15 | +def call(i): |
| 16 | + return i*2 |
| 17 | + |
| 18 | +#使用for循环 |
| 19 | +def kk(jj): |
| 20 | + for i in yield_test(jj): |
| 21 | + print(i,",####") |
| 22 | + ``` |
| 23 | + |
| 24 | +阅读别人的python源码时碰到了这个yield这个关键字,各种搜索终于搞懂了,在此做一下总结: |
| 25 | +通常的for...in...循环中,in后面是一个数组,这个数组就是一个可迭代对象,类似的还有链表,字符串,文件。它可以是mylist = [1, 2, 3],也可以是mylist = [x*x for x in range(3)]。 |
| 26 | +它的缺陷是所有数据都在内存中,如果有海量数据的话将会非常耗内存。 |
| 27 | +生成器是可以迭代的,但只可以读取它一次。因为用的时候才生成。比如 mygenerator = (x*x for x in range(3)),注意这里用到了(),它就不是数组,而上面的例子是[]。 |
| 28 | +我理解的生成器(generator)能够迭代的关键是它有一个next()方法,工作原理就是通过重复调用next()方法,直到捕获一个异常。可以用上面的mygenerator测试。 |
| 29 | +带有 yield 的函数不再是一个普通函数,而是一个生成器generator,可用于迭代,工作原理同上。 |
| 30 | +yield 是一个类似 return 的关键字,迭代一次遇到yield时就返回yield后面(右边)的值。重点是:下一次迭代时,从上一次迭代遇到的yield后面的代码(下一行)开始执行。 |
| 31 | +简要理解:yield就是 return 返回一个值,并且记住这个返回的位置,下次迭代就从这个位置后(下一行)开始。 |
| 32 | +带有yield的函数不仅仅只用于for循环中,而且可用于某个函数的参数,只要这个函数的参数允许迭代参数。比如array.extend函数,它的原型是array.extend(iterable)。 |
| 33 | +send(msg)与next()的区别在于send可以传递参数给yield表达式,这时传递的参数会作为yield表达式的值,而yield的参数是返回给调用者的值。——换句话说,就是send可以强行修改上一个yield表达式值。比如函数中有一个yield赋值,a = yield 5,第一次迭代到这里会返回5,a还没有赋值。第二次迭代时,使用.send(10),那么,就是强行修改yield 5表达式的值为10,本来是5的,那么a=10 |
| 34 | +send(msg)与next()都有返回值,它们的返回值是当前迭代遇到yield时,yield后面表达式的值,其实就是当前迭代中yield后面的参数。 |
| 35 | +第一次调用时必须先next()或send(None),否则会报错,send后之所以为None是因为这时候没有上一个yield(根据第8条)。可以认为,next()等同于send(None) |
| 36 | +作者:千若逸 |
| 37 | +链接:https://www.jianshu.com/p/d09778f4e055 |
| 38 | +来源:简书 |
| 39 | +著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。 |
| 40 | +```py |
| 41 | +# 理解的关键在于:下次迭代时,代码从yield的下一跳语句开始执行。 |
| 42 | +kk(1) |
| 43 | +# (0, ',####') |
| 44 | +# ('i=', 0) |
| 45 | +# do something. |
| 46 | +# end. |
| 47 | +kk(2) |
| 48 | +# (0, ',####') |
| 49 | +# ('i=', 0) |
| 50 | +# (2, ',####') |
| 51 | +# ('i=', 1) |
| 52 | +# do something. |
| 53 | +# end. |
| 54 | +kk(5) |
| 55 | +# (0, ',####') |
| 56 | +# ('i=', 0) |
| 57 | +# (2, ',####') |
| 58 | +# ('i=', 1) |
| 59 | +# (4, ',####') |
| 60 | +# ('i=', 2) |
| 61 | +# (6, ',####') |
| 62 | +# ('i=', 3) |
| 63 | +# (8, ',####') |
| 64 | +# ('i=', 4) |
| 65 | +# do something. |
| 66 | +# end. |
| 67 | +# >>> |
| 68 | +# >>> def g(): |
| 69 | +# ... print "1" |
| 70 | +# ... x = yield "hello" |
| 71 | +# ... print "2","x =",x |
| 72 | +# ... y=5 + (yield x) |
| 73 | +# ... print "3","y = ",y |
| 74 | +# ... |
| 75 | +# >>> f=g() |
| 76 | +# >>> |
| 77 | +# >>> f.next() |
| 78 | +# 1 |
| 79 | +# 'hello' |
| 80 | +# >>> f.send(5) |
| 81 | +# 2 x = 5 |
| 82 | +# 5 |
| 83 | +# >>> f.send(2) |
| 84 | +# 3 y = 7 |
| 85 | +# Traceback (most recent call last): |
| 86 | +# File "<stdin>", line 1, in <module> |
| 87 | +# StopIteration |
| 88 | +# >>> |
| 89 | +``` |
| 90 | + |
| 91 | +# 生成器 |
| 92 | +l=(i for i in range(10) if i%2 == 0) |
| 93 | +#<generator object <genexpr> at 0x028E1CD8> |
| 94 | +# 协程 |
| 95 | + |
| 96 | + |
| 97 | +子程序,或者称为函数,在所有语言中都是层级调用,比如A调用B,B在执行过程中又调用了C, |
| 98 | +C执行完毕返回,B执行完毕返回,最后是A执行完毕。 |
| 99 | +所以子程序调用是通过栈实现的,一个线程就是执行一个子程序。 |
| 100 | +协程看上去也是子程序,但执行过程中,在子程序内部可中断,然后转而执行别的子程序, |
| 101 | +在适当的时候再返回来接着执行。 |
| 102 | +但协程的特点在于是一个线程执行,那和多线程比,协程有何优势? |
| 103 | +最大的优势就是协程极高的执行效率。因为子程序切换不是线程切换,而是由程序自身控制,因此, |
| 104 | +没有线程切换的开销,和多线程比,线程数量越多,协程的性能优势就越明显。 |
| 105 | +第二大优势就是不需要多线程的锁机制,因为只有一个线程,也不存在同时写变量冲突, |
| 106 | +在协程中控制共享资源不加锁,只需要判断状态就好了,所以执行效率比多线程高很多。 |
| 107 | +因为协程是一个线程执行,那怎么利用多核CPU呢?最简单的方法是多进程+协程,既充分利用多核, |
| 108 | +又充分发挥协程的高效率,可获得极高的性能。 |
| 109 | +Python对协程的支持还非常有限,用在generator中的yield可以一定程度上实现协程。虽然支持不完全,但已经可以发挥相当大的威力了 |
| 110 | +传统的生产者-消费者模型是一个线程写消息,一个线程取消息,通过锁机制控制队列和等待, |
| 111 | +但一不小心就可能死锁。 |
| 112 | +如果改用协程,生产者生产消息后,直接通过yield跳转到消费者开始执行,待消费者执行完毕后 |
| 113 | +切换回生产者继续生产,效率极高: |
| 114 | +“子程序就是协程的一种特例。” |
| 115 | +函数内使用yield变成生成器,func.next(),遇到yield就返回yield后面跟的值, |
| 116 | +下次调用直接从yield的位置开始 |
| 117 | +如果c=func(),c.send(i),那么yield的位置会获取i这个值,生成器函数不会返回,会继续运行yield下面的操作 |
| 118 | +```py |
| 119 | +def consumer(): |
| 120 | + r='' |
| 121 | + while True: |
| 122 | + n=yield r |
| 123 | + print('吃货:包子[%s]来了,吃包子' %n) |
| 124 | + time.sleep(1) |
| 125 | + r='200 ok' |
| 126 | +def producer(c): |
| 127 | + c.next() |
| 128 | + for i in range(5): |
| 129 | + print('厨师:包子[%s]做好了' %i) |
| 130 | + r=c.send(i) |
| 131 | + print('厨师:包子被取走了,状态码为%s' %r) |
| 132 | + c.close() |
| 133 | +producer(consumer()) |
| 134 | +""" |
| 135 | +#运行结果 |
| 136 | +厨师:包子[0]做好了 |
| 137 | +吃货:包子[0]来了,吃包子 |
| 138 | +厨师:包子被取走了,状态码为200 ok |
| 139 | +厨师:包子[1]做好了 |
| 140 | +吃货:包子[1]来了,吃包子 |
| 141 | +厨师:包子被取走了,状态码为200 ok |
| 142 | +厨师:包子[2]做好了 |
| 143 | +吃货:包子[2]来了,吃包子 |
| 144 | +厨师:包子被取走了,状态码为200 ok |
| 145 | +厨师:包子[3]做好了 |
| 146 | +吃货:包子[3]来了,吃包子 |
| 147 | +厨师:包子被取走了,状态码为200 ok |
| 148 | +厨师:包子[4]做好了 |
| 149 | +吃货:包子[4]来了,吃包子 |
| 150 | +厨师:包子被取走了,状态码为200 ok |
| 151 | +整个流程无锁,由一个线程执行,produce和consumer协作完成任务,所以称为“协程”, |
| 152 | +而非线程的抢占式多任务。 |
| 153 | +""" |
| 154 | +``` |
0 commit comments