scrapy如何不写xpath直接写正则表达式

来源:4-4 pycharm中调试scrapy源码

weixin_慕标2352120

2021-03-25

老师,您好。我想请问,如果我请求的页面他都是js写的,动态页面,但是我请求能看到里面我需求的内容。却用xpath写不了,如何再def里直接用正则表达式,正则表达式我知道怎么写,就是他应该指向哪一个变量,就是请求的url.text

写回答

1回答

bobby

2021-03-27

你直接在返回的html内容上通过reponse拿到返回的内容 然后直接基于这个内容写正则表达式提取内容就行了

0
0

Scrapy打造搜索引擎 畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎

5796 学习 · 6290 问题

查看课程