随机获取 User-Agent问题

来源：8-5 通过downloadmiddleware随机更换user-agent - 2

慕莱坞yql

2019-03-20

老师：你好！
在middlewares.py 已经可以获取到 User-Agent，但在模拟登录无法赋值到我的模拟登录的 headers中，该如何做呢？请指教。

图片描述

写回答

1回答

bobby

2019-03-22

这个self.headers是无法获取到你再middlware中获取到的ua的，你要再middle中直接把ua赋值给request，而且既然你已经用middlware拦截了所有的requests 你这个return的request就没有必要设置headers了

Scrapy打造搜索引擎畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎

5796 学习 · 6290 问题

相似问题

回答 1

回答 1

回答 1

回答 1

回答 2