用scrapyd 部署.启动爬虫报错FileNotFoundError

来源:16-1 scrapyd部署scrapy项目

SillyGGGG

2018-02-22

http://img.mukewang.com/szimg/5a8e907400016b0613400887.jpg

不明白为什么会去到c盘找!

写回答

2回答

慕粉3691223

2018-07-11

应该是使用scrapyd部署上去的时候,BASE_DIR会被其覆盖,导致我们很多的log都找错了地方,显示错误,我们要新建一个 LOG_DIR,不要使用BASE_DIR在系统中拼装各种路径.

可以参考下:

https://stackoverflow.com/questions/50453479/valueerror-while-deploying-scrapy

0
0

bobby

2018-02-24

这个是因为scrapyd会自动解压文件 你的服务器是windows吗?

0
2
bobby
回复
SillyGGGG
scrapyd会临时解压egg文件 然后去里面找, 你的scrapy部署本地文件有没有上传成功?
2018-02-27
共2条回复

Scrapy打造搜索引擎 畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎

5795 学习 · 6290 问题

查看课程