QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 3104|回复: 2
打印 上一主题 下一主题

[国赛经验] Python 迭代器、生成器

[复制链接]
字体大小: 正常 放大

326

主题

32

听众

1万

积分

  • TA的每日心情
    慵懒
    2020-7-12 09:52
  • 签到天数: 116 天

    [LV.6]常住居民II

    管理员

    群组2018教师培训(呼和浩

    群组2017-05-04 量化投资实

    群组2017“草原杯”夏令营

    群组2018美赛冲刺培训

    群组2017 田老师国赛冲刺课

    跳转到指定楼层
    1#
    发表于 2020-6-16 10:18 |只看该作者 |倒序浏览
    |招呼Ta 关注Ta
    一、可迭代对象
    ( D# J2 ?6 R" Y/ Q! C字面意思:
    * P1 I+ G( l0 X3 m6 d, q2 R对象:Python 中一切皆为对象(巧了 Java 也是(手动滑稽))1 N' d0 G5 G. a" L* a5 ]! G, E
    可迭代:可更新迭代,重复、循环的一个过程,每次更新迭代都会获得新的内容# `# X1 K" {/ |7 s
    专业角度:内部含有 '__iter__‘ 方法的对象( l5 R# R4 m& p4 F/ M
    目前学过的可迭代对象:str、list、tuple、dict、set、range、文件句柄等0 K* C" e8 G, i' x& {
    判断一个对象是否是可迭代对象:看是否有 '__iter__' 方法,dir() 可以获取一个对象的所有方法;或者使用 isinstance(object, collections.iterable) 来判断对象是否是可迭代对象的一个实例" L8 r5 R: M8 L1 O7 Y3 ~0 W

    5 V5 [. d+ l. z) V+ p
    # ^4 f, B" r* g3 d# f优点:
    9 K1 }* z* ~3 y+ m4 f" ]存储的数据直接能显示,比较直观:比如直接 print 一个可迭代对象,就会调用 __str__ 方法(相当于 Java 中的 toString),把可迭代对象的值打印出来+ Z  n6 t* g3 }+ i! Q3 A
    拥有较多的方法,操作方便:增删查改等
    6 O. w5 x5 A( m7 L( c( D缺点:
    ) k( k1 o; I+ |3 o占用内存:一旦创建了一个可迭代对象,就会将该对象的内容全部加载到内存中
    $ ~/ |! f9 J. S& o1 z. G) j不能直接通过 for 循环,不能直接取值(通过索引、key等)。诸如通过 for i in iterable 这种形式获取元素实际上也是调用了 __iter__ 方法先将可迭代对象转换成迭代器再进行获取1 h* A1 _( C7 Q/ }# w
    二、迭代器
    ; @* ]& r4 r* p" X7 x2 g字面意思:器,工具,迭代器也就是可以一直更新迭代取值的工具0 ]: C! W9 S+ D; E" [1 g3 C, i3 L
    专业角度:内部含有 __iter__ 方法且含有 __next__ 方法的对象就是迭代器;或者使用 isinstance(object, collections.iterator) 来判断对象是否是可迭代对象的一个实例' K. c4 `$ ?4 j6 m8 x  ^/ V* ]
    把一个可迭代对象转换成迭代器:使用 iter() 方法或使用对象的 __iter__ 方法
    8 ?* ?. `  J# `) u: G6 r" V' O
    # l* X: ]8 t' j. ?% w/ D迭代器取值:使用 next() 方法或对象的 __next__ 方法;当迭代器的值去玩了继续取,就会报StopIteration异常,所以一般使用迭代器需要做异常处理' U1 \  x- Y" z- S

    1 e9 f$ P( C- p, R优点6 M4 i  f3 V: \1 T' E
    节省内存:迭代器并不会一次性将对象的值全部加载到内存中,而是需要时才加载(类似 sed)
    ) q3 @% c) L/ p惰性机制:next 一次只取一个值,绝对不多取. v' u6 A! s+ ^& h4 O" i
    缺点:9 [* y8 M0 D" M) E3 [, s- b
    速度慢:需要一直 next0 Z0 n- l: {1 u2 P- G; D
    不能回头:只能一直往下取值,取过的值没保存就没了`$ ~4 @3 K6 w2 b2 r2 W0 T7 P: V- H
    不能直观的看到里面的数据4 i- {6 S! S+ y" Y
    三、可迭代对象与迭代器对比' H3 b% Q+ Z+ L
    可迭代对象:# J1 ^* k! z/ }: u
    私有方法多,操作灵活(比如列表,字典的增删改查,字符串的常用操作方法等)
    5 {8 M- y5 n  C' \直观,可以直接看到里面的数据- l# o' f6 s) H5 J
    占用内存' }9 l5 L8 O9 c8 d
    不能直接通过循环迭代取值$ [/ i% T: x6 ]+ m
    应用:当你侧重于对于数据可以灵活处理,并且内存空间足够,将数据集设置为可迭代对象是明确的选择
    0 x2 i# Q* ~" u6 \% T3 W迭代器:
    0 s7 R3 a; @* t! ~节省内存,按需取值
    5 I7 E: F) C) N5 T# h) }8 z" h可以直接通过循环迭代取值/ n- b, C4 a4 T+ Q  u
    数据不直观,操作方法单一
    5 |! a! i4 y: a$ A# o9 H2 \应用:当你的数据量过大,大到足以撑爆你的内存或者你以节省内存为首选因素时,将数据集设置为迭代器是一个不错的选择
    8 y( R5 B! P9 {四、生成器
    " d  r  V6 W1 ?生成器的本质就是迭代器,唯一的区别是生成器是我们自己用代码构建的数据结构,迭代器是 Python 提供的,或者通过可迭代对象转化得来的( z2 J# B  C& c+ G; ^7 R6 s
    + y& F/ J, Y7 y1 Q' E% H
    定义生成器的方式:  w! F1 C: a% D3 k; e, s
    通过生成器函数构建生成器
    / Y" N  k: s6 s* W6 C$ ] 111.png 8 u1 Y/ @7 w6 L- S- I) O
    & V7 N. u: e1 b
    6 x4 o+ c$ z7 S% U( R0 ?
    这就是最简单的生成器函数。实际上这个 yield 就替代了 return,不仅将函数变成了生成器函数,还会将后面的值在调用 __next__ 的时候返回出来* w1 V" n: \7 _! G0 `1 }
    1 W; }9 ~' L3 m8 g4 p9 N
    也可以在一个函数里定义多个 yield
    ( \) l, l! n5 }+ }3 s% M% _. Q! P
    之前说过,生成器本质上还是迭代器,一个 yield 对应一个 next,当 next 的数量超过了 yield,就会报 StopIteration
    % ~1 F" |, O) Y! n4 b
    6 b$ R0 _$ \9 z9 l2 byield 与 return 的区别; P  m7 W4 R% {

    3 s  V, b) n0 G& Breturn一般在函数中只设置一个,他的作用是终止函数,并且给函数的执行者返回值. v+ x8 U' U/ ^4 m! O, G
    yield在生成器函数中可设置多个,他并不会终止函数,next会获取对应yield生成的元素
    # e4 |3 }# O8 s. r/ v应用举例:
    9 `+ D  A2 f1 x. Z0 |$ ?1 F- o, \
    0 W1 ~( u- q  p/ j  ?$ k买 5000 个包子,假设这个老板很厉害,一下子就把 5000 个包子做出来卖给我们,可是我们只有 5 个人,一下子吃不完,那包子就会冷掉、臭掉、被丢掉浪费了, L" W, C: o) c( m- d: w# f* w
    222.png ! P) g9 h+ e6 w% w: t# t3 w
    & |1 ^: E' {5 b& j" x% [9 v
    如果这个老板可以在我们需要多少个包子就做出来多少个包子的话,这样做出来的包子就不会被浪费了(比如我们每个人一口气能吃 40 个包子,那每次就做 200 个包子):
    ! N' W/ w2 t. t9 Y9 `$ T9 L" ? 3333.png
    / G* V6 o# n. L+ v) M- B9 S: @- A2 r$ j. o' F! N, x0 C' ^
    除了 使用 next() 触发 yield 之外,生成器还有一种方法 send(),这个方法可以在调用 yield 的同时传值给生成器内部
    7 p0 L4 s+ W, G* H
    + v* U8 _- F9 M( K1 r. s4 @1 s可以看到在使用 next() 的时候,只能获取到 yield 的值,但不能传递值% _  W" l4 D/ |/ h# p+ _4 b! u

    0 @5 u/ \' L) V: z在使用 send() 的时候,可以将参数传入生成器中使用
    % [) d- P7 k) Q) w( n" j# a) H. m- @  Y8 E: E6 h0 P1 f4 r( V8 f
    需要注意的是第一次不能直接调用 send() 传参,因为每次调用生成器的时候,实际上只会返回 yield 后面的内容,然后生成器就停止了(睡眠了?),而 send() 传入的参数要通过 yield 传入生成器中(每次调用生成器在 yield 停止,然后在 yield 恢复继续允许),第一次调用并没有 yield 给我们传入参数,可以使用 send(None),可以打断点自己分析一下
    ; y& q! F0 T: |" r* W: e$ }* a! p* _
    yield 会将它后面跟着的对象直接返回,如果它后面跟着的是可迭代对象,也可以使用 yield from 将这个可迭代对象变成迭代器返回- [3 p2 x+ M( u6 z; t. c
    6 B% G- T& ^, k+ N
    5 E! J( |2 a- l( X& d
    yield from 是将列表中的每一个元素返回,所以写两个 yield from 并不会有交替执行的效果, {5 Z  U5 y5 r" d
    . F5 y1 v8 B$ R/ a/ }+ D

    . ^7 [' G! @" r' S$ J
    ; @* @% h  l" q3 g通过推导式构建生成器/ b* s5 M2 Y5 H  U1 i  i7 V  l
    列表推导式:: H9 i: m+ c" b4 D0 j

    % a9 w( G9 p* n, C1 e4 w生成器表达式:和列表推导式差不多,把 [] 改成 () 即可
    6 A1 y# w, L3 m( F" v! C% Y
    & m) _; K" l- n; v' X7 i% N' B/ C8 S7 \# N% S
    列表推导式和生成器推导式的区别:
    8 j2 l! I! z* r
    ! [7 _) \% M& |) j" V列表推导式比较耗内存,所有数据一次性加载到内存;而生成器表达式遵循迭代器协议,逐个产生元素# v5 ^, V( m; L1 _3 \) B
    得到的值不一样:列表推导式得到的是一个列表;生成器表达式获取的是一个生成器
    " M7 s1 B" i3 q1 T' v& v列表推导式一目了然,生成器表达式只是一个内存地址$ N9 i! D7 h. `" w# ?- A+ ]( E- H
    ————————————————0 w! z: g7 Y# C( ^+ K
    版权声明:本文为CSDN博主「阿玮d博客」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。9 S8 L4 Q6 P, h0 J- V6 @9 K# r7 b
    原文链接:https://blog.csdn.net/weixin_42511320/article/details/105676143$ p, [0 U0 e5 Z7 R4 N
    0 B7 P  w  q; a4 X0 S8 ~. ]
    4 x3 U/ H0 N4 ^
    zan
    转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
    dwadasd        

    0

    主题

    1

    听众

    54

    积分

    升级  51.58%

    该用户从未签到

    网络挑战赛参赛者

    自我介绍
    dasd asdasd
    回复

    使用道具 举报

    dwadasd        

    0

    主题

    1

    听众

    54

    积分

    升级  51.58%

    该用户从未签到

    网络挑战赛参赛者

    自我介绍
    dasd asdasd
    回复

    使用道具 举报

    您需要登录后才可以回帖 登录 | 注册地址

    qq
    收缩
    • 电话咨询

    • 04714969085
    fastpost

    关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

    手机版|Archiver| |繁體中文 手机客户端  

    蒙公网安备 15010502000194号

    Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

    GMT+8, 2025-8-14 09:40 , Processed in 0.493091 second(s), 63 queries .

    回顶部