为 aiohttp 爬虫注入灵魂

谢乾坤|青南 at 
为 aiohttp 爬虫注入灵魂的配图
听说过异步爬虫的同学,应该或多或少听说过 aiohttp 这个库。它通过 Python 自带的 async/await 实现了异步爬虫。使用 aiohttp,我们可以通过 requests 的 api 写出并发量匹敌 Scrapy 的爬虫。我们在 aiohttp 的官方文档上面,可以看到它给出了一个代码示例,如下图所示:我们现在稍稍修改一下,来看看这样写爬虫,运行效率如何。修改以后的代码如下:12345678910111213141516171819import asyncioimport aiohttptemplate = 'http://exercise.kingname.info/exe……