豆瓣存入MongoDB时,数据不完整

来源:4-8 【补充】XPath 语法基础

979811597

2023-04-10

前面的数据比较顺利,但在不断下一页的过程中,到了70+条数据时,数据就写不进去了,打开了豆瓣对应的网址,提示是

…你访问豆瓣的方式有点像机器人程序。为了保护用户的数据,请向我们证明你是人类:

写回答

1回答

Martin__Wang

2023-05-10

带上cookie就好了

0
0

Python 分布式爬虫与 JS 逆向进阶实战

20+ 案例 & 可接单级项目,全面提升爬虫实战能力

99 学习 · 26 问题

查看课程