老师我debug一直重复这yield一条,进不去parse_nums

来源:4-23 itemloader提取信息

超帅侠

2020-03-10

图片描述图片描述老师我debug一直重复这yield一条,进不去parse_nums

写回答

1回答

bobby

2020-03-11

cnblogs因为要几个请求才能完成一个item,但是在每个item的最后一个url请求完成以前。scrapy会大量的yield很多新闻的url出去。所以parse_nums被拍到后面去了,你可以只在parse中yield一个request出去就方便调试了

0
3
超帅侠
回复
bobby
哦哦哦,谢谢老师
2020-03-11
共3条回复

Scrapy打造搜索引擎 畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎

5795 学习 · 6290 问题

查看课程