关于起始url及参数问题

来源:13-2 通过修改scrapy-redis完成增量抓取 -1

风逝fly

2021-01-20

老师,我想问一下,起始是一个文件,一行一行的有url,也有其他量。读取这个文件存储到redis后,再怎么将访问这个url,兵器其他量也能传下去

写回答

2回答

风逝fly

提问者

2021-01-21

存入redis数据库是一个列表,里面包含URL,想列表的URL进行访问,其他参数传下去

0
1
bobby
想列表的URL进行访问,其他参数传下去 这句话不是很明白, 其他参数是什么参数?
2021-01-24
共1条回复

bobby

2021-01-21

你的这个问题我看了好几遍 没有看明白 还有错别字 能再描述一下吗?

0
0

Scrapy打造搜索引擎 畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎

5796 学习 · 6290 问题

查看课程