计算本科毕设爬多个电商平台的商品信息,能实现吗?

普本毕设,内容大概就是接收用户输入的商品,去多个电商平台爬取商品信息到数据库里,然后个性化展示。 和导师交流的时候,老师说爬电商平台可能会有难度,然后…
关注者
8
被浏览
1,175

6 个回答

github/platonai/exotic 提供了一大批电商网站数据采集案例,都是一行代码解决问题。即使最复杂的网站譬如餐饮网站,也提供了现成的企业级解决方案:保证最高标准的数据质量、采集性能、数据完整性、系统监控和总体拥有成本。

如果你要秀一手,譬如单机每天采集亚马逊1000万数据点,你可以用github/platonai/exotic-amazon 解决,各项指标同样都是全球最高标准。

如果你要了解爬虫行业最前沿的 AI 爬虫,用机器学习提取数据,也可以了解github/platonai/exotic,该项目提供了监督学习和无监督学习案例。

如果你需要对比各种爬虫方案的特性和利弊,可以参考这个回答:

zhihu.com/answer/273805