请教大家一个设计问题。现在有一个点餐类搜索引擎,爬取 100w 个饭店,有 10 种送餐方式,不同送餐方式的快递费不同,快递费会随时间变化而变化。 要求给定一个邮编,显示附近的饭店和对应的送餐价格。
权衡的因素有: 数据是否实时,数据是否正确,对网站影响尽可能小
1
locoz 2019-06-14 08:06:44 +08:00 via Android 1
感觉你的描述有点奇怪,给你细化一下:
1、爬的这 100w 个饭店的数据源来自哪里? 2、10 种送餐方式和爬虫之间的关系? 3、邮编我记得只到区级,怎么精确定位?话说这年头有人用邮编点餐? 4、要数据实时就不可能对对方网站压力小,这是无法调和的矛盾。 |
2
silencefent 2019-06-14 08:36:00 +08:00
建议从头学习爬虫入门技术
|