1
+ #encoding:UTF-8
2
+ def yield_test (n ):
3
+ for i in range (n ):
4
+ yield call (i )
5
+ print ("i=" ,i )
6
+ #做一些其它的事情
7
+ print ("do something." )
8
+ print ("end." )
9
+
10
+ def call (i ):
11
+ return i * 2
12
+
13
+ #使用for循环
14
+ def kk (jj ):
15
+ for i in yield_test (jj ):
16
+ print (i ,",####" )
17
+ """
18
+ 阅读别人的python源码时碰到了这个yield这个关键字,各种搜索终于搞懂了,在此做一下总结:
19
+
20
+ 通常的for...in...循环中,in后面是一个数组,这个数组就是一个可迭代对象,类似的还有链表,字符串,文件。它可以是mylist = [1, 2, 3],也可以是mylist = [x*x for x in range(3)]。
21
+ 它的缺陷是所有数据都在内存中,如果有海量数据的话将会非常耗内存。
22
+ 生成器是可以迭代的,但只可以读取它一次。因为用的时候才生成。比如 mygenerator = (x*x for x in range(3)),注意这里用到了(),它就不是数组,而上面的例子是[]。
23
+ 我理解的生成器(generator)能够迭代的关键是它有一个next()方法,工作原理就是通过重复调用next()方法,直到捕获一个异常。可以用上面的mygenerator测试。
24
+ 带有 yield 的函数不再是一个普通函数,而是一个生成器generator,可用于迭代,工作原理同上。
25
+ yield 是一个类似 return 的关键字,迭代一次遇到yield时就返回yield后面(右边)的值。重点是:下一次迭代时,从上一次迭代遇到的yield后面的代码(下一行)开始执行。
26
+ 简要理解:yield就是 return 返回一个值,并且记住这个返回的位置,下次迭代就从这个位置后(下一行)开始。
27
+ 带有yield的函数不仅仅只用于for循环中,而且可用于某个函数的参数,只要这个函数的参数允许迭代参数。比如array.extend函数,它的原型是array.extend(iterable)。
28
+ send(msg)与next()的区别在于send可以传递参数给yield表达式,这时传递的参数会作为yield表达式的值,而yield的参数是返回给调用者的值。——换句话说,就是send可以强行修改上一个yield表达式值。比如函数中有一个yield赋值,a = yield 5,第一次迭代到这里会返回5,a还没有赋值。第二次迭代时,使用.send(10),那么,就是强行修改yield 5表达式的值为10,本来是5的,那么a=10
29
+ send(msg)与next()都有返回值,它们的返回值是当前迭代遇到yield时,yield后面表达式的值,其实就是当前迭代中yield后面的参数。
30
+ 第一次调用时必须先next()或send(None),否则会报错,send后之所以为None是因为这时候没有上一个yield(根据第8条)。可以认为,next()等同于send(None)
31
+
32
+ 作者:千若逸
33
+ 链接:https://www.jianshu.com/p/d09778f4e055
34
+ 来源:简书
35
+ 著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。
36
+ """
37
+
38
+ # 理解的关键在于:下次迭代时,代码从yield的下一跳语句开始执行。
39
+ kk (1 )
40
+ # (0, ',####')
41
+ # ('i=', 0)
42
+ # do something.
43
+ # end.
44
+
45
+ kk (2 )
46
+ # (0, ',####')
47
+ # ('i=', 0)
48
+ # (2, ',####')
49
+ # ('i=', 1)
50
+ # do something.
51
+ # end.
52
+
53
+ kk (5 )
54
+ # (0, ',####')
55
+ # ('i=', 0)
56
+ # (2, ',####')
57
+ # ('i=', 1)
58
+ # (4, ',####')
59
+ # ('i=', 2)
60
+ # (6, ',####')
61
+ # ('i=', 3)
62
+ # (8, ',####')
63
+ # ('i=', 4)
64
+ # do something.
65
+ # end.
66
+
67
+
68
+
69
+ # >>>
70
+ # >>> def g():
71
+ # ... print "1"
72
+ # ... x = yield "hello"
73
+ # ... print "2","x =",x
74
+ # ... y=5 + (yield x)
75
+ # ... print "3","y = ",y
76
+ # ...
77
+ # >>> f=g()
78
+ # >>>
79
+ # >>> f.next()
80
+ # 1
81
+ # 'hello'
82
+ # >>> f.send(5)
83
+ # 2 x = 5
84
+ # 5
85
+ # >>> f.send(2)
86
+ # 3 y = 7
87
+ # Traceback (most recent call last):
88
+ # File "<stdin>", line 1, in <module>
89
+ # StopIteration
90
+ # >>>
91
+
92
+
93
+ """
94
+ #生成器
95
+ l=(i for i in range(10) if i%2 == 0)
96
+
97
+ #<generator object <genexpr> at 0x028E1CD8>
98
+ #协程
99
+ '''
100
+ 子程序,或者称为函数,在所有语言中都是层级调用,比如A调用B,B在执行过程中又调用了C,
101
+ C执行完毕返回,B执行完毕返回,最后是A执行完毕。
102
+ 所以子程序调用是通过栈实现的,一个线程就是执行一个子程序。
103
+ 协程看上去也是子程序,但执行过程中,在子程序内部可中断,然后转而执行别的子程序,
104
+ 在适当的时候再返回来接着执行。
105
+ 但协程的特点在于是一个线程执行,那和多线程比,协程有何优势?
106
+ 最大的优势就是协程极高的执行效率。因为子程序切换不是线程切换,而是由程序自身控制,因此,
107
+ 没有线程切换的开销,和多线程比,线程数量越多,协程的性能优势就越明显。
108
+ 第二大优势就是不需要多线程的锁机制,因为只有一个线程,也不存在同时写变量冲突,
109
+ 在协程中控制共享资源不加锁,只需要判断状态就好了,所以执行效率比多线程高很多。
110
+ 因为协程是一个线程执行,那怎么利用多核CPU呢?最简单的方法是多进程+协程,既充分利用多核,
111
+ 又充分发挥协程的高效率,可获得极高的性能。
112
+ Python对协程的支持还非常有限,用在generator中的yield可以一定程度上实现协程。虽然支持不完全,但已经可以发挥相当大的威力了
113
+ 传统的生产者-消费者模型是一个线程写消息,一个线程取消息,通过锁机制控制队列和等待,
114
+ 但一不小心就可能死锁。
115
+ 如果改用协程,生产者生产消息后,直接通过yield跳转到消费者开始执行,待消费者执行完毕后
116
+ 切换回生产者继续生产,效率极高:
117
+
118
+
119
+ “子程序就是协程的一种特例。”
120
+
121
+ 函数内使用yield变成生成器,func.next(),遇到yield就返回yield后面跟的值,
122
+ 下次调用直接从yield的位置开始
123
+ 如果c=func(),c.send(i),那么yield的位置会获取i这个值,生成器函数不会返回,会继续运行yield下面的操作
124
+ '''
125
+ def consumer():
126
+ r=''
127
+ while True:
128
+ n=yield r
129
+ print('吃货:包子[%s]来了,吃包子' %n)
130
+ time.sleep(1)
131
+ r='200 ok'
132
+
133
+ def producer(c):
134
+ c.next()
135
+ for i in range(5):
136
+ print('厨师:包子[%s]做好了' %i)
137
+ r=c.send(i)
138
+ print('厨师:包子被取走了,状态码为%s' %r)
139
+ c.close()
140
+ producer(consumer())
141
+
142
+
143
+
144
+ #运行结果
145
+
146
+
147
+ 厨师:包子[0]做好了
148
+ 吃货:包子[0]来了,吃包子
149
+ 厨师:包子被取走了,状态码为200 ok
150
+ 厨师:包子[1]做好了
151
+ 吃货:包子[1]来了,吃包子
152
+ 厨师:包子被取走了,状态码为200 ok
153
+ 厨师:包子[2]做好了
154
+ 吃货:包子[2]来了,吃包子
155
+ 厨师:包子被取走了,状态码为200 ok
156
+ 厨师:包子[3]做好了
157
+ 吃货:包子[3]来了,吃包子
158
+ 厨师:包子被取走了,状态码为200 ok
159
+ 厨师:包子[4]做好了
160
+ 吃货:包子[4]来了,吃包子
161
+ 厨师:包子被取走了,状态码为200 ok
162
+
163
+ 整个流程无锁,由一个线程执行,produce和consumer协作完成任务,所以称为“协程”,
164
+ 而非线程的抢占式多任务。
165
+ """
0 commit comments