老师您好, 在实际线上, 商品数量数量都不知道具体是多少, 全静态化技术怎么应用到线上生成环境中呢
来源：6-8 商品详情页全页面静态化（上）
慕UI6292214
2019-08-18
老师您好, 您讲的这个爬虫技术, 怎么在实际生成中应用呢, 比如我有1万哥商品 ,一页显示10哥商品, 我有1000个分页列表, 有1万哥商品; 这个数据我在开发的时候并不知道啊;
问题1: 这么多页面我怎么去生成,是通过批处理吗
问题2: 这些分页的列表页面都是动态的, 假如我加了一个商品, 这些页面都要重新生成, 我是需要先执行生成然后再将页面部署到服务器吗
问题3:生产环境中都是分布式的, 怎么保证这些页面每一个服务器的一致性呢
写回答
1回答
-
龙虾三少
2019-08-18
多线程批量去爬 然后推送cdn 信息发生变更后重新做这个过程 没办法保证强一致 只能保证一定的一致性
10
相似问题