爬取知乎页面的时候debug都是模拟登陆……

来源:6-20 保存数据到mysql中 -2

斑比站在你身旁

2019-03-19

每次打完断点,debug后如果模拟成功登陆就直接输出程序,但是出现一段红字,怎么改都这样……
图片描述

如果第一个模拟登陆那段代码故意写错密码进入验证码识别那里,登陆成功后就一直输出数据……
图片描述
图片描述

并不能爬取知乎的数据…… 是要把知乎的页面保存到本地么?我看老师后续爬取的时候并不跳转登陆页面吖

cookies这部分代码
图片描述

写回答

1回答

斑比站在你身旁

提问者

2019-03-19

我用的useragent是我自己浏览器的,不会是这部分原因吧?而且一直开着写着 chromex.exe --remote-debugger的这个cmd……

0
4
bobby
回复
斑比站在你身旁
你给我发qq消息 我看看你的问题
2019-03-22
共4条回复

Scrapy打造搜索引擎 畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎

5829 学习 · 6293 问题

查看课程