Python怎么使用async/await_Python异步编程async/await入门

python怎么使用async/await_python异步编程async/await入门

Python使用

async/await

的核心在于定义协程(

async def

)和等待协程完成(

await

),它让程序在等待I/O操作时可以切换到其他任务,显著提升并发性能,尤其适用于网络请求、文件读写等I/O密集型场景。

在Python中,

async/await

是实现异步编程,特别是基于协程(coroutines)的并发机制的关键语法糖。简单来说,它允许你的程序在执行一个耗时但不需要CPU计算的任务(比如等待网络响应、数据库查询或文件读写)时,暂时“暂停”当前任务,让出控制权给事件循环,去执行其他准备就绪的任务。当之前暂停的任务的I/O操作完成后,事件循环会通知它继续执行。

async def

用于定义一个协程函数。当你调用这样一个函数时,它不会立即执行,而是返回一个协程对象。这个对象本身是一个“可等待”(awaitable)的实体。

await

关键字只能在

async def

定义的协程函数内部使用。它的作用是等待一个可等待对象(比如另一个协程、一个Future或一个Task)完成。当

await

遇到一个未完成的可等待对象时,它会暂停当前协程的执行,并将控制权交还给事件循环。事件循环此时可以去运行其他协程。一旦被

await

的对象完成并返回结果,当前协程会从暂停的地方继续执行。

一个最基本的例子可能长这样:

import asyncioasync def say_hello(delay, message):    print(f"[{asyncio.current_task().get_name()}] 开始等待 {delay} 秒...")    await asyncio.sleep(delay) # 这是一个异步的非阻塞等待    print(f"[{asyncio.current_task().get_name()}] {message}!")async def main():    # 创建并运行两个协程任务    task1 = asyncio.create_task(say_hello(3, "Hello from Task 1"), name="Task-1")    task2 = asyncio.create_task(say_hello(1, "Hi from Task 2"), name="Task-2")    # 等待这两个任务完成    await task1    await task2    print("所有任务都完成了。")if __name__ == "__main__":    asyncio.run(main())

在这个例子里,

say_hello

是一个协程。

main

函数创建了两个

say_hello

的实例作为任务,并使用

await

等待它们完成。因为

asyncio.sleep

是非阻塞的,所以当

Task-1

在等待3秒时,

Task-2

可以立即开始执行它的1秒等待。这样,两个任务看起来是并发执行的,而不是像同步代码那样,先等3秒再等1秒。

立即学习“Python免费学习笔记(深入)”;

Python异步编程的核心优势是什么?它与传统同步编程模式有何不同?

在我看来,Python异步编程最核心的优势在于它能够以极低的资源开销实现高并发,尤其是在I/O密集型任务中。我们都知道,CPU的速度远超硬盘读写或网络传输。在传统的同步编程模式下,当程序发起一个网络请求或文件读取时,它会傻傻地等待,直到操作完成才能继续执行。这段等待时间,CPU其实是闲置的,什么也没做。这就像你点了一份外卖,然后就坐在门口,什么也不干,直到外卖送到。

异步编程改变了这种模式。它允许程序在等待I/O操作时“暂停”当前任务,将CPU的控制权交还给一个调度器(也就是事件循环),让调度器去运行其他已经准备好的任务。当I/O操作完成后,调度器会通知之前暂停的任务继续执行。这就像你点完外卖后,可以去洗个澡、看会儿电视,甚至再点一份水果,等外卖快到了再准备开门。这样,你的时间就得到了更有效的利用。

与传统同步编程模式的主要区别

执行模型:同步: 任务按顺序执行,一个任务必须完全结束后,下一个任务才能开始。如果其中一个任务阻塞(等待I/O),整个程序都会停滞。异步: 任务可以在等待I/O时“挂起”,让出CPU,允许其他任务运行。当挂起的任务I/O就绪后,它会被事件循环重新调度执行。它实现的是“协作式多任务”,而不是操作系统层面的抢占式多任务。资源利用:同步: 为了实现并发,通常需要创建多个线程或进程。每个线程/进程都有自己的内存开销和上下文切换成本。异步: 通常在一个单线程内实现高并发。通过协程的切换,避免了线程/进程的创建和销毁开销,以及昂贵的上下文切换。这使得它在处理大量并发连接时,内存占用和CPU开销都更低。复杂度:同步: 逻辑相对直接,易于理解和调试,因为代码的执行顺序就是编写顺序。异步: 引入了事件循环、协程、

async/await

等概念,初期学习曲线可能更陡峭。调试时也需要适应其非线性的执行流程。但一旦掌握,它能解决同步编程难以高效处理的并发问题。

我个人的体会是,很多人初次接触异步编程会觉得它很“魔幻”,甚至有点反直觉。但一旦你理解了它不是为了让CPU计算得更快,而是为了让CPU在等待外部资源时也能保持“忙碌”,去做一些有意义的事情,那么它的价值就显而易见了。它不是万能药,计算密集型任务依然需要多进程来利用多核CPU,但对于网络服务、爬虫、数据处理管道等I/O密集型应用,异步编程无疑是提升性能和响应速度的利器。

在Python中,如何启动和有效地管理

asyncio

事件循环?

启动和管理

asyncio

事件循环,是掌握异步编程的基石。事件循环是

asyncio

应用程序的“心脏”,它负责调度和执行协程。

1. 使用

asyncio.run()

(Python 3.7+ 推荐方式)

这是目前最简洁、最推荐的启动事件循环的方式。

asyncio.run()

函数是一个高级API,它为你处理了事件循环的创建、运行和关闭等所有细节。你只需要传入你的主协程即可。

import asyncioasync def main_coroutine():    print("主协程开始")    await asyncio.sleep(1)    print("主协程结束")if __name__ == "__main__":    print("启动事件循环...")    asyncio.run(main_coroutine())    print("事件循环已关闭。")
asyncio.run()

会:

创建一个新的事件循环。运行传入的协程直到完成。关闭事件循环。处理一些清理工作,比如取消所有未完成的任务。

对于大多数简单的脚本或应用程序,

asyncio.run()

是最佳选择,它避免了手动管理事件循环可能带来的复杂性和错误。

2. 手动管理事件循环 (适用于特定场景或旧代码)

在Python 3.7之前,或者当你需要在更复杂的环境中(例如,在现有线程中集成

asyncio

,或者需要自定义事件循环的行为)时,你可能需要手动管理事件循环。

import asyncioasync def my_task(name):    print(f"任务 {name} 开始")    await asyncio.sleep(2)    print(f"任务 {name} 结束")def manual_loop_management():    loop = asyncio.get_event_loop() # 获取当前线程的事件循环,如果没有则创建    try:        print("手动管理:运行任务 A")        loop.run_until_complete(my_task("A")) # 运行一个协程直到完成        print("手动管理:运行多个任务")        task_b = loop.create_task(my_task("B")) # 创建一个任务        task_c = loop.create_task(my_task("C"))        loop.run_until_complete(asyncio.gather(task_b, task_c)) # 等待多个任务完成    finally:        loop.close() # 确保事件循环被关闭if __name__ == "__main__":    # asyncio.run(main_coroutine()) # 使用推荐方式    manual_loop_management() # 使用手动方式

手动管理涉及以下步骤:

asyncio.get_event_loop()

:获取当前线程的事件循环。如果当前线程没有事件循环,它会创建一个新的。

loop.run_until_complete(coroutine)

:运行一个协程直到它完成。

loop.close()

:关闭事件循环。这会清除所有待处理的回调和任务,并释放资源。非常重要,否则可能导致资源泄露。

3. 有效地管理并发任务:

asyncio.create_task()

asyncio.gather()

仅仅启动事件循环是不够的,你还需要有效地管理多个并发执行的协程。

asyncio.create_task(coroutine)

当你想要一个协程在后台“独立”运行,而不是被

await

立即阻塞时,你需要将它包装成一个

Task

create_task

会安排协程在事件循环中运行,并立即返回一个Task对象。你可以稍后

await

这个Task对象来获取其结果或等待其完成。

async def fetch_data(url):    print(f"正在从 {url} 获取数据...")    await asyncio.sleep(2) # 模拟网络延迟    print(f"从 {url} 获取数据完成。")    return f"Data from {url}"async def main_tasks():    task1 = asyncio.create_task(fetch_data("http://example.com/api/1"))    task2 = asyncio.create_task(fetch_data("http://example.com/api/2"))    # 此时 task1 和 task2 已经开始在后台运行了    print("任务已创建,正在等待结果...")    result1 = await task1 # 等待 task1 完成    result2 = await task2 # 等待 task2 完成    print(f"收到结果: {result1}, {result2}")# asyncio.run(main_tasks())

*`asyncio.gather(coros_or_futures, loop=None, return_exceptions=False)`:** 这是一个非常实用的工具,用于同时运行并等待多个可等待对象(协程或Future)完成。它会收集所有结果,并按传入顺序返回。

async def main_gather():    results = await asyncio.gather(        fetch_data("http://example.com/api/3"),        fetch_data("http://example.com/api/4"),        fetch_data("http://example.com/api/5")    )    print(f"所有数据都已获取: {results}")# asyncio.run(main_gather())
asyncio.gather()

在等待多个任务时非常方便,它能确保所有任务都被调度并等待其完成。

我的经验告诉我,事件循环是

asyncio

的基石,理解它的启动、运行和关闭机制,以及如何使用

create_task

gather

来编排协程,是编写高效、健壮异步代码的关键。一开始可能会觉得有点抽象,但随着实践的深入,你会发现它强大的调度能力。

async/await

在实际应用中,如何处理并发任务的异常和取消操作?

在实际的异步编程中,仅仅启动和等待任务是不够的,我们还需要妥善处理可能出现的异常和任务取消。这就像在现实世界中,计划总赶不上变化,我们需要有应对突发状况的机制。

1. 异常处理

异步任务中的异常处理与同步代码类似,主要通过

try...except

块来实现。

捕获单个协程的异常: 你可以在

await

一个可能抛出异常的协程时,使用

try...except

来捕获它。

import asyncioasync def might_fail_task(task_id):    if task_id % 2 != 0:        raise ValueError(f"任务 {task_id} 故意失败了!")    await asyncio.sleep(1)    return f"任务 {task_id} 成功完成。"async def handle_single_task_error():    try:        result = await might_fail_task(1) # 这个会失败        print(result)    except ValueError as e:        print(f"捕获到异常: {e}")    try:        result = await might_fail_task(2) # 这个会成功        print(result)    except ValueError as e:        print(f"捕获到异常: {e}") # 不会执行# asyncio.run(handle_single_task_error())

asyncio.gather()

中的异常:

asyncio.gather()

在处理多个任务时,默认行为是“快速失败”(fail fast)。如果它所等待的任何一个子任务抛出了异常,

gather

会立即取消所有其他未完成的任务,并重新抛出第一个遇到的异常。

async def handle_gather_error_default():    try:        results = await asyncio.gather(            might_fail_task(1), # 会失败            might_fail_task(2), # 会成功,但可能被取消            might_fail_task(3)  # 会失败,但可能在第一个异常抛出前被取消        )        print(f"所有任务完成: {results}")    except ValueError as e:        print(f"asyncio.gather 捕获到异常: {e}")        # 此时,其他任务可能已经被取消了# asyncio.run(handle_gather_error_default())

asyncio.gather()

return_exceptions=True

如果你希望

gather

等待所有任务完成,即使其中有任务失败,并将异常作为结果返回而不是直接抛出,你可以设置

return_exceptions=True

async def handle_gather_error_return_exceptions():    results = await asyncio.gather(        might_fail_task(1), # 失败        might_fail_task(2), # 成功        might_fail_task(3), # 失败        return_exceptions=True # 关键参数    )    print("所有任务都处理完毕(包括失败的):")    for i, res in enumerate(results):        if isinstance(res, Exception):            print(f"  任务 {i+1} 失败: {res}")        else:            print(f"  任务 {i+1} 成功: {res}")# asyncio.run(handle_gather_error_return_exceptions())

这种方式在处理多个独立且不互相依赖的任务时非常有用,比如批量处理数据,你希望即使某些数据处理失败,也不影响其他数据的处理。

2. 任务取消

在异步编程中,任务取消是一个重要的概念。你可能需要停止一个长时间运行的任务,例如用户关闭了一个页面,或者一个操作超时了。

task.cancel()

调用一个

Task

对象的

cancel()

方法,会向该任务发送一个取消请求。这并不会立即停止任务,而是在任务内部(通常是在下一个

await

点)抛出一个

asyncio.CancelledError

异常。

async def long_running_task(task_name):    print(f"[{task_name}] 任务开始...")    try:        for i in range(5):            print(f"[{task_name}] 工作中... {i+1}/5")            await asyncio.sleep(1) # 这是一个可能的取消点    except asyncio.CancelledError:        print(f"[{task_name}] 任务被取消了!执行清理工作...")    finally:        print(f"[{task_name}] 任务结束(无论成功或取消)。")async def main_cancel():    task = asyncio.create_task(long_running_task("A"))    await asyncio.sleep(2.5) # 等待任务运行一段时间    print("主程序:请求取消任务 A...")    task.cancel() # 发送取消请求    try:        await task # 等待

以上就是Python怎么使用async/await_Python异步编程async/await入门的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1372757.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
使用 WSL(Windows 子系统)运行 Python 的优势
上一篇 2025年12月14日 12:35:41
Python教程:解决比较大小程序中字符串比较导致的问题
下一篇 2025年12月14日 12:35:52

相关推荐

  • composer require-dev和require有什么不同_Composer Require与Require-Dev区别解析

    require用于声明项目运行必需的依赖,如框架、数据库组件和第三方SDK,这些包会随项目部署到生产环境;2. require-dev用于声明仅在开发和测试阶段需要的工具,如PHPUnit、PHPStan、Faker等,不会默认部署到生产环境;3. 安装时composer install根据环境决定…

    2026年5月10日
    1000
  • Matplotlib 地图中多类型图例的创建与优化

    Matplotlib 地图中多类型图例的创建与优化Matplotlib 地图中多类型图例的创建与优化Matplotlib 地图中多类型图例的创建与优化Matplotlib 地图中多类型图例的创建与优化

    本教程旨在解决matplotlib地图可视化中,如何在一个图例中同时展示颜色块(如区域分类)和自定义标记(如特定兴趣点)的问题。文章详细介绍了当传统`patch`对象无法正确显示标记时,如何利用`matplotlib.lines.line2d`创建标记图例句柄,并将其与颜色块图例句柄合并,从而生成一…

    2026年5月10日 用户投稿
    900
  • Golang JSON序列化:控制敏感字段暴露的最佳实践

    本教程探讨golang中如何高效控制结构体字段在json序列化时的可见性。当需要将包含敏感信息的结构体数组转换为json响应时,通过利用`encoding/json`包提供的结构体标签,特别是`json:”-“`,可以轻松实现对特定字段的忽略,从而避免敏感数据泄露,确保api…

    2026年5月10日
    300
  • 利用海象运算符简化条件赋值:Python教程与最佳实践

    本文旨在探讨Python中海象运算符(:=)在条件赋值场景下的应用。通过对比传统if/else语句与海象运算符,以及条件表达式,分析海象运算符在简化代码、提高可读性方面的优势与局限性。并通过具体示例,展示如何在列表推导式等场景下合理使用海象运算符,同时强调其潜在的复杂性及替代方案,帮助开发者更好地掌…

    2026年5月10日
    300
  • Debian syslog性能优化技巧有哪些

    提升Debian系统syslog (通常基于rsyslog)性能,关键在于精简配置和高效处理日志。以下策略能有效优化日志管理,提升系统整体性能: 精简配置,高效加载: 在rsyslog配置文件中,仅加载必要的输入、输出和解析模块。 使用全局指令设置日志级别和格式,避免不必要的处理。 自定义模板: 创…

    2026年5月10日
    000
  • 比特币新手教程 比特币交易平台有哪些

    比特币是一种去中心化的数字货币,基于区块链技术实现点对点交易,具有匿名性、有限发行和不可篡改等特点;新手可通过交易所购买,P2P交易获得比特币,常用平台包括Binance、OKX和Huobi;交易流程包括注册账户、实名认证、绑定支付方式、充值法币并下单购买,可选择市价单或限价单;比特币存储方式有交易…

    2026年5月10日
    000
  • c++中的SFINAE技术是什么_c++模板编程中的SFINAE原理与应用

    SFINAE 是“替换失败不是错误”的原则,指模板实例化时若参数替换导致错误,只要存在其他合法候选,编译器不报错而是继续重载决议。它用于条件启用模板、类型检测等场景,如通过 decltype 或 enable_if 控制函数重载,实现类型特征判断。尽管 C++20 引入 Concepts 简化了部分…

    2026年5月10日
    000
  • Go语言mgo查询构建:深入理解bson.M与日期范围查询的正确实践

    本文旨在解决go语言mgo库中构建复杂查询时,特别是涉及嵌套`bson.m`和日期范围筛选的常见错误。我们将深入剖析`bson.m`的类型特性,解释为何直接索引`interface{}`会导致“invalid operation”错误,并提供一种推荐的、结构清晰的代码重构方案,以确保查询条件能够正确…

    2026年5月10日
    100
  • RichHandler与Rich Progress集成:解决显示冲突的教程

    在使用rich库的`richhandler`进行日志输出并同时使用`progress`组件时,可能会遇到显示错乱或溢出问题。这通常是由于为`richhandler`和`progress`分别创建了独立的`console`实例导致的。解决方案是确保日志处理器和进度条组件共享同一个`console`实例…

    2026年5月10日
    300
  • 修复点击时按钮抖动:CSS垂直对齐实践

    本文探讨了在Web开发中,交互式按钮(如播放/暂停按钮)在点击时发生意外垂直位移的问题。通过分析CSS样式变化对元素布局的影响,我们发现这是由于按钮不同状态下的边框样式和内边距改变,以及默认的垂直对齐行为共同作用所致。核心解决方案是利用CSS的vertical-align属性,将其设置为middle…

    2026年5月10日
    100
  • Golang goroutine与channel调试技巧

    使用go run -race检测数据竞争,结合runtime.NumGoroutine监控协程数量,通过pprof分析阻塞调用栈,利用select超时避免永久阻塞,有效排查goroutine泄漏、死锁和数据竞争问题。 Go语言的goroutine和channel是并发编程的核心,但它们也带来了调试上…

    2026年5月10日
    000
  • 使用 Jupyter Notebook 进行探索性数据分析

    Jupyter Notebook通过单元格实现代码与Markdown结合,支持数据导入(pandas)、清洗(fillna)、探索(matplotlib/seaborn可视化)、统计分析(describe/corr)和特征工程,便于记录与分享分析过程。 Jupyter Notebook 是进行探索性…

    2026年5月10日
    000
  • 《魔兽世界》将于6月11日开启国服回归技术测试

    《魔兽世界》将于6月11日开启国服回归技术测试《魔兽世界》将于6月11日开启国服回归技术测试《魔兽世界》将于6月11日开启国服回归技术测试《魔兽世界》将于6月11日开启国服回归技术测试

    《%ign%ignore_a_1%re_a_1%》官方宣布,将于6月11日开启国服回归技术测试,时间为7天,并称可以在6月内正式开服,玩家们可以访问官网下载战网客户端并预下载“巫妖王之怒”客户端,技术测试详情见下图。 WordAi WordAI是一个AI驱动的内容重写平台 53 查看详情 以上就是《…

    2026年5月10日 用户投稿
    200
  • php常量怎么用_PHP常量(define/const)定义与使用方法

    PHP中可通过define函数和const关键字定义常量,用于存储不可变值。define适用于全局作用域,支持动态名称和条件定义,如define(‘SITE_NAME’, ‘MyWebsite’);const在编译时生效,语法简洁但限制多,只能在类或全…

    2026年5月10日
    000
  • 如何在HTML中插入表单元素_HTML表单控件与输入类型使用指南

    HTML表单通过标签构建,包含action和method属性定义数据提交目标与方式,常用input类型如text、password、email等适配不同输入需求,配合label、required、placeholder提升可用性,结合textarea、select、button等控件实现完整交互,是…

    2026年5月10日
    300
  • 网站标题关键词更新后,搜索引擎为何仍显示旧标题?

    网站标题更新后,搜索引擎为何显示旧标题? 网站SEO优化中,站长常修改网站标题关键词,期望搜索结果显示自定义标题。然而,即使更新标签、meta keywords、meta description和结构化数据中的name属性后,搜索结果仍显示旧标题,这令人费解。本文将对此进行解释。 问题:站长修改了网…

    2026年5月10日
    300
  • 创建指定大小并填充特定数据的Golang文件教程

    本文将介绍如何使用Golang创建一个指定大小的文件,并用特定数据填充它。我们将使用 `os` 包提供的函数来创建和截断文件,从而实现快速生成大文件的目的。示例代码展示了如何创建一个10MB的文件,并将其填充为全零数据。掌握这些方法,可以方便地在例如日志系统或磁盘队列等场景中,预先创建测试文件或初始…

    2026年5月10日
    000
  • Python命令怎样使用profile分析脚本性能 Python命令性能分析的基础教程

    使用Python的cProfile模块分析脚本性能最直接的方式是通过命令行执行python -m cProfile your_script.py,它会输出每个函数的调用次数、总耗时、累积耗时等关键指标,帮助定位性能瓶颈;为进一步分析,可将结果保存为文件python -m cProfile -o ou…

    2026年5月10日
    000
  • 使用 WebCodecs VideoDecoder 实现精确逐帧回退

    本文档旨在解决在使用 WebCodecs VideoDecoder 进行视频解码时,实现精确逐帧回退的问题。通过比较帧的时间戳与目标帧的时间戳,可以避免渲染中间帧,从而提高用户体验。本文将提供详细的解决方案和示例代码,帮助开发者实现精确的视频帧控制。 在使用 WebCodecs VideoDecod…

    2026年5月10日
    300
  • 如何插入查询结果数据_SQL插入Select查询结果方法

    如何插入查询结果数据_SQL插入Select查询结果方法如何插入查询结果数据_SQL插入Select查询结果方法如何插入查询结果数据_SQL插入Select查询结果方法如何插入查询结果数据_SQL插入Select查询结果方法

    使用INSERT INTO…SELECT语句可高效插入数据,通过NOT EXISTS、LEFT JOIN、MERGE语句或唯一约束避免重复;表结构不一致时可通过别名、类型转换、默认值或计算字段处理;结合存储过程可提升可维护性,支持参数化与动态SQL。 将查询结果数据插入到另一个表中,可以…

    2026年5月10日 用户投稿
    400

发表回复

登录后才能评论
关注微信