aiohttp的使用

在 6.1节,我们介绍了异步爬虫的基本原理和 asyncio 的基本用法,并且在最后简单提及了使用 aiohttp 实现网页爬取的过程。本节我们介绍一下 aiohttp 的常见用法。

基本介绍

基本实例

URL 参数设置

其它请求类型

POST 请求

响应

超时设置

并发限制

总结

本节我们了解了 aiohttp 的基本使用方法,更详细的内容还是推荐大家查阅官方文档,详见 https://docs.aiohttp.org/