老师,只爬取了博客园,实现搜索功能时,列表页中好多搜索到的内容,点击后需要登录博客园才能访问,马上要答辩了有些着急,希望老师尽快帮我解决一下。

来源:15-7 django实现搜索结果分页

碎觉勿扰

2020-04-23

还存在好多这种问题:
图片描述

写回答

1回答

bobby

2020-04-23

这个是css的问题 你的前端源码是在哪里下载的 是什么时候下载的? https://git.imooc.com/coding-92/coding-92/src/master/LcvSearch/search/views.py 后台也可以查看这里的源码 参考一下

0
2
bobby
回复
碎觉勿扰
博客园的问题课程中说到过,博客园能看到的url是有数量限制的,比如前几页不用登陆就能看,所以抓取到以后 今天抓取到的url 明天可能就要登录才能访问,前端页面你可以使用我的lcvsearch项目中的template目录下的html文件试试
2020-04-24
共2条回复

Scrapy打造搜索引擎 畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎

5831 学习 · 6293 问题

查看课程