Python异步编程:深入理解asyncio库(上)
作者:zhanglj-qiucm | 来源:互联网 | 2024-12-28 11:52
本文介绍了Python3.4版本引入的标准库asyncio,该库为异步IO提供了强大的支持。我们将探讨为什么需要asyncio,以及它如何简化并发编程的复杂性,并详细介绍其核心概念和使用方法。
### 引言
`asyncio` 是 Python 3.4 版本引入的一个标准库,旨在提供对异步 IO 的内置支持。尽管生成器和协程已经可以实现部分异步功能,但 `asyncio` 提供了一个更为全面的框架,使得开发人员能够更高效地编写并发代码。
#### 为什么需要 `asyncio`
许多开发者可能会问,既然已经有了基于生成器的协程(如 `yield` 和 `yield from`),为什么还需要 `asyncio`?这是因为 `asyncio` 不仅简化了复杂的调度逻辑,还提供了丰富的工具和接口,帮助开发者专注于业务逻辑而非底层实现细节。
就像 Django 和 Scrapy 这样的框架一样,`asyncio` 将重复性和复杂的工作封装起来,使开发者能够更轻松地构建高性能的异步应用。
#### 学习路径
在掌握了协程的基本概念后,你可能会发现不知道如何实际应用它们来实现并发。这时,`asyncio` 就显得尤为重要了。它不仅提供了一套完整的工具链,还能帮助你更好地理解和掌握协程的工作原理。
### 核心概念
在深入学习 `asyncio` 的使用方法之前,了解以下几个关键概念是非常有帮助的:
- **事件循环 (Event Loop)**:程序启动一个无限循环,程序员可以将协程注册到事件循环上。当特定事件发生时,事件循环会调用相应的协程。
- **协程 (Coroutine)**:使用 `async def` 定义的函数,调用时返回一个协程对象。协程对象需要注册到事件循环中,由事件循环负责执行。
- **Future 对象**:表示将来某个时刻完成的任务的结果。它可以与 Task 对象互换使用。
- **Task 对象**:是对协程的进一步封装,包含任务的各种状态信息。Task 是 Future 的子类,将协程与 Future 联系在一起。
- **`async`/`await` 关键字**:用于定义和挂起协程的关键字。`async` 用于定义协程,而 `await` 用于等待异步操作完成。
### 实战演练
为了更好地理解这些概念,我们可以通过一些实例来逐步学习。
#### 创建协程对象
```python
from collections.abc import Coroutine
async def hello(name):
print('Hello,', name)
if __name__ == '__main__':
coroutine = hello("World") # 创建协程对象
print(isinstance(coroutine, Coroutine)) # 检查是否是协程类型
```
#### 使用 `@asyncio.coroutine` 装饰器
```python
import asyncio
from collections.abc import Generator, Coroutine
@asyncio.coroutine
def hello():
yield from asyncio.sleep(1)
if __name__ == '__main__':
coroutine = hello()
print(isinstance(coroutine, Generator)) # True
print(isinstance(coroutine, Coroutine)) # False
```
#### 协程工作流程
协程的完整工作流程包括以下步骤:
1. 定义/创建协程对象
2. 将协程转为 Task 任务
3. 定义事件循环对象容器
4. 将 Task 任务放入事件循环并触发
```python
import asyncio
async def hello(name):
print('Hello,', name)
if __name__ == '__main__':
coroutine = hello("World") # 定义协程对象
loop = asyncio.get_event_loop() # 获取事件循环
task = loop.create_task(coroutine) # 将协程转为 Task 任务
loop.run_until_complete(task) # 触发事件循环
```
#### `await` 与 `yield` 的对比
`await` 和 `yield` 在一定程度上有相似之处,都能实现暂停的效果,但它们的功能并不完全兼容。具体来说,`await` 只能在 `async` 函数中使用,而 `yield` 则不能。
此外,`yield from` 后面可以接可迭代对象或 Future/协程对象,而 `await` 后面只能接 Future 或协程对象。
```python
import asyncio
from asyncio.futures import Future
async def hello(name):
await asyncio.sleep(2)
print('Hello,', name)
if __name__ == '__main__':
coroutine = hello("World")
task = asyncio.ensure_future(coroutine)
print(isinstance(task, Future)) # True
```
#### 绑定回调函数
异步 IO 的实现原理是在高延迟的地方挂起,等 IO 完成后再继续执行。通常情况下,后续代码的执行依赖于 IO 的返回值,这时就需要使用回调函数。
##### 同步回调
```python
import asyncio
import time
async def _sleep(x):
time.sleep(2)
return f'暂停了{x}秒!'
if __name__ == '__main__':
coroutine = _sleep(2)
loop = asyncio.get_event_loop()
task = asyncio.ensure_future(coroutine)
loop.run_until_complete(task)
print(f'返回结果:{task.result()}')
```
##### 异步回调
```python
import asyncio
import time
async def _sleep(x):
time.sleep(2)
return f'暂停了{x}秒!'
if __name__ == '__main__':
coroutine = _sleep(2)
loop = asyncio.get_event_loop()
task = asyncio.ensure_future(coroutine)
task.add_done_callback(lambda future: print(future.result()))
loop.run_until_complete(task)
```
通过以上内容,希望你能对 `asyncio` 有一个更全面的理解,并能够在实际项目中灵活运用。
推荐阅读
-
本文介绍如何仅使用Numpy库,通过双线性插值方法实现图像的高效缩放,避免了对OpenCV等图像处理库的依赖。文中详细解释了算法原理,并提供了完整的代码示例。 ...
[详细]
蜡笔小新 2024-12-28 13:15:40
-
本文详细介绍 Go+ 编程语言中的上下文处理机制,涵盖其基本概念、关键方法及应用场景。Go+ 是一门结合了 Go 的高效工程开发特性和 Python 数据科学功能的编程语言。 ...
[详细]
蜡笔小新 2024-12-28 11:05:31
-
-
本文详细介绍如何使用Python进行配置文件的读写操作,涵盖常见的配置文件格式(如INI、JSON、TOML和YAML),并提供具体的代码示例。 ...
[详细]
蜡笔小新 2024-12-28 08:39:55
-
本文探讨了如何从动态网站中提取站点密钥,特别是针对验证码(reCAPTCHA)的处理方法。通过结合Selenium和requests库,提供了详细的代码示例和优化建议。 ...
[详细]
蜡笔小新 2024-12-28 04:11:47
-
本文详细介绍了 Dockerfile 的编写方法及其在网络配置中的应用,涵盖基础指令、镜像构建与发布流程,并深入探讨了 Docker 的默认网络、容器互联及自定义网络的实现。 ...
[详细]
蜡笔小新 2024-12-27 17:31:41
-
本文详细介绍C++中实现KMP算法的方法,探讨其在字符串匹配问题上的优势。通过对比暴力匹配(BF)算法,展示KMP算法如何利用前缀表优化匹配过程,显著提升效率。 ...
[详细]
蜡笔小新 2024-12-27 14:45:30
-
本文详细解析了如何使用Python语言在STM32硬件平台上实现高效的编程和快速的应用开发。通过具体的代码示例,展示了Python简洁而强大的特性。 ...
[详细]
蜡笔小新 2024-12-27 12:54:18
-
golang常用库:配置文件解析库管理工具-viper使用-一、viper简介viper配置管理解析库,是由大神SteveFrancia开发,他在google领导着golang的 ...
[详细]
蜡笔小新 2024-12-28 13:47:52
-
本文介绍如何解决在 IIS 环境下 PHP 页面无法找到的问题。主要步骤包括配置 Internet 信息服务管理器中的 ISAPI 扩展和 Active Server Pages 设置,确保 PHP 脚本能够正常运行。 ...
[详细]
蜡笔小新 2024-12-28 11:54:54
-
本文深入探讨了如何通过多种技术手段优化ListView的性能,包括视图复用、ViewHolder模式、分批加载数据、图片优化及内存管理等。这些方法能够显著提升应用的响应速度和用户体验。 ...
[详细]
蜡笔小新 2024-12-28 10:36:30
-
本文详细介绍如何在PyCharm中配置和使用Pylint,帮助开发者进行静态代码检查,确保代码符合PEP8规范,提高代码质量。 ...
[详细]
蜡笔小新 2024-12-28 10:16:06
-
1:有如下一段程序:packagea.b.c;publicclassTest{privatestaticinti0;publicintgetNext(){return ...
[详细]
蜡笔小新 2024-12-27 19:32:17
-
本文详细介绍了如何在Linux系统上安装和配置Smokeping,以实现对网络链路质量的实时监控。通过详细的步骤和必要的依赖包安装,确保用户能够顺利完成部署并优化其网络性能监控。 ...
[详细]
蜡笔小新 2024-12-27 19:31:05
-
本文详细介绍了SQL中的视图、存储过程和事务的概念及应用。视图为用户提供了一种灵活的数据查询方式,存储过程则封装了复杂的SQL逻辑,而事务确保了数据库操作的完整性和一致性。 ...
[详细]
蜡笔小新 2024-12-27 17:40:42
-
本章将深入探讨移动 UI 设计的核心原则,帮助开发者构建简洁、高效且用户友好的界面。通过学习设计规则和用户体验优化技巧,您将能够创建出既美观又实用的移动应用。 ...
[详细]
蜡笔小新 2024-12-27 08:43:40
-
zhanglj-qiucm
这个家伙很懒,什么也没留下!