当前位置:首页 > 技术 > 正文内容

Python 异步编程中的异步迭代器详解

访客 技术 2026年5月28日 2

异步迭代器:在 asyncio 中实现自定义异步遍历

在 Python 的异步编程中,除了协程和任务之外,还有一类强大的工具——异步迭代器(asynchronous iterators)。它们允许我们在 async for 循环中逐步获取数据,尤其适用于需要按需生成或等待结果的场景。

理解异步迭代器的核心机制

一个对象要成为异步迭代器,必须实现两个特殊方法:

  • __aiter__():返回异步迭代器实例本身,通常直接返回 self
  • __anext__():返回一个可等待对象(awaitable),该对象在完成时产生下一个值。当没有更多元素时,必须抛出 StopAsyncIteration 异常以终止循环。

与传统的同步迭代器不同,异步迭代器的每一步都可以包含异步操作,例如网络请求、文件读取或延时处理。

如何定义一个异步迭代器

下面是一个自定义异步迭代器的示例,它每次返回递增的数字,并在每次迭代之间模拟耗时操作:

import asyncio

class NumberStream:
    def __init__(self, start=1, end=5):
        self.current = start
        self.end = end

    def __aiter__(self):
        return self

    async def __anext__(self):
        if self.current > self.end:
            raise StopAsyncIteration
        # 模拟异步工作,如 I/O 操作
        await asyncio.sleep(0.5)
        value = self.current
        self.current += 1
        return value

在这个例子中,__anext__ 是一个协程函数(使用 async def 定义),因此它可以 await 其他协程,比如 asyncio.sleep()

使用 async for 遍历异步迭代器

最常见的方式是使用 async for 语句来消费异步迭代器。这个语法只能在协程内部使用。

async def main():
    async for number in NumberStream(1, 3):
        print(f"Received: {number}")

# 启动事件循环
asyncio.run(main())

输出将会是:

Received: 1
Received: 2
Received: 3

每次循环都会自动调用 __anext__() 并等待其结果,整个过程是非阻塞的,但顺序执行。

手动控制迭代:使用 anext()

如果需要更细粒度地控制迭代过程,可以使用内置的 anext() 函数:

async def manual_traversal():
    stream = NumberStream(1, 2)
    try:
        while True:
            value = await anext(stream)
            print(f"Got: {value}")
    except StopAsyncIteration:
        print("No more items")

anext() 接收一个异步迭代器并返回一个 awaitable,通过 await 获取实际值。当迭代结束时会触发 StopAsyncIteration,应妥善捕获该异常。

结合异步列表推导式收集结果

还可以利用异步列表推导式从异步迭代器中构建结果列表:

async def collect_results():
    results = [x async for x in NumberStream(1, 4)]
    print(results)  # 输出: [1, 2, 3, 4]

这种写法简洁且符合 Python 风格,在需要将流式数据转为集合时非常实用。

异步生成器:更简单的替代方案

对于许多情况,无需手动实现 __aiter____anext__。Python 提供了异步生成器函数,只需在生成器前加上 async 即可:

async def number_generator(start, stop):
    for i in range(start, stop + 1):
        await asyncio.sleep(0.5)
        yield i

async def use_generator():
    async for num in number_generator(1, 3):
        print(num)

这种方式更加简洁,功能上等价于手动定义的异步迭代器。

相关文章

Linux crontab 详解

1) crontab 是什么cron 是 Linux 的定时任务守护进程;crontab 是用来编辑/查看“按时间周期执行命令”的表(cron table)。常见两类:用户 crontab:每个用户一份(crontab -e 编辑)系统级 crontab / cron.d:可指定执行用户(/etc/crontab、/etc/cron.d/*)2) crontab 时间...

富文本里可以允许的 HTML 属性

一、所有标签默认允许的安全属性(极少)class        (可选)id           (通常建议禁用)title️ 注意:id 容易被滥用做锚点注入,很多系统直接禁用class 允许的话最好只允许固定前缀(如 editor-*)二、a 标签允许属性<a href="" t...

Mac 安装 Node.js 指南

方法一:通过官网安装包(最简单,适合初学者)如果你只是想快速安装并开始使用,这是最直接的方法。访问 Node.js 官网。页面会显示两个版本:LTS (Recommended For Most Users):长期支持版,最稳定。建议选这个。Current:最新特性版,包含最新功能但可能不够稳定。下载 .pkg 安装包并运行。按照安装向导点击“下一步”即可完成。方法二:使用 Homebrew 安装(...

Dom\HTML_NO_DEFAULT_NS 的副作用:自动加闭合标签

在使用Dom\HTMLDocument时,Dom\HTML_NO_DEFAULT_NS 将禁止在解析过程中设置元素的命名空间, 此设置是为了与DOMDocument向后兼容而存在的。当使用它时,已知的一个副作用就是:自动加闭合标签例如 </img> 为什么会这样?当你使用:Dom\HTML_NO_DEFAULT_NS文档会变成 无命名空间模式,此时内部更接近 XML...

Laravel 事件和监听器创建

在 Laravel 中,使用 Artisan 命令创建 Events(事件) 和 Listeners(监听器) 是非常高效的。你可以通过以下几种方式来实现:1. 手动创建单个 Event如果你只想创建一个事件类,可以使用 make:event 命令:Bashphp artisan make:event UserRegistered执行后,文件将生成在 app/Even...

自定义域名解析神器 dnsmasq

什么是 dnsmasq?dnsmasq 是一个轻量级、功能强大的网络服务工具,专为小型和中等规模网络设计。它是一个综合的网络基础设施解决方案[1]。dnsmasq 能做什么?功能说明应用场景DNS 转发与缓存将 DNS 查询转发到上游服务器(ISP、Google DNS 等),并在本地缓存结果加快 DNS 查询速度,减少外部 DNS 流量本地 DNS解析本地网络设备的主机名,无需编辑&n...

发表评论

访客

◎欢迎参与讨论,请在这里发表您的看法和观点。