对于高并发爬虫而言,是使用 run_in_execute+requests 好呢,还是使用 aiohttp 更好一些呢?

来源:13-2 事件循环-2

羁书贵公子

2019-08-27

对于高并发爬虫而言,是使用 run_in_execute+requests 好呢,还是使用 aiohttp 更好一些呢?

写回答

1回答

bobby

2019-08-29

并发肯定是aiohttp,aiohttp是真正意义上的并发,requests本身是同步的库,只是放到了线程池中运行而已,只是requests本身用起来很方便,因为这个库本身强大而且稳定性好

0
0

Python3高级核心技术97讲,高级进阶的必学课程

socket编程/多线程/多进程/线程池/asyncio并发编程/协程和异步IO

2121 学习 · 551 问题

查看课程