关于课程提问

来源：1-1 python分布式爬虫打造搜索引擎简介

颜十二

2020-04-01

bobby老师跟着课程一直学完全能实现你最后的项目吗

写回答

1回答

bobby

2020-04-01

可以的，你是说的网站效果吗？其实网站效果的内容不多。课程主要都是在做爬虫网站搭建是比较简单的

bobby

颜十二

1s要抓取千百万个？这个任何一个单机爬虫都做不到，要几十上百台服务器才行，而且你的数据库是否能hold住1s上千万和上百万的入库，瓶颈一般都在数据库上

2020-04-19

共4条回复

Scrapy打造搜索引擎畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎

5828 学习 · 6293 问题

相似问题

回答 2

回答 1

回答 1

回答 1

回答 1