Python初学者项目:Amazon价格记录
AmazonPriceTracker
想要成功运行的先导步骤以及可能出现的报错
- 需要pip pony: https://docs.ponyorm.org/firststeps.html
- pip失败:需要给环境path增加python的路径(python lib library等等一堆都加上)
- Headers部分修改:修改成增加自己的:google 搜索my user agent
- download the tool to open .db: https://sqlitebrowser.org/dl/
已经写了的部分的代码的参考资料
- scrape from amazon: https://www.digitalocean.com/community/tutorials/scrape-amazon-product-information-beautiful-soup
- database: https://www.youtube.com/watch?v=uWg-XAyyJTk&ab_channel=JohnWatsonRooney
内容后续(可能)功能/优化点
【功能】【中等】爬Amazon页面数据(done by yao)【功能】【中等】数据放到数据库里,方便后续可视化(done by yao)- 【优化】【简单】配置部分单独形成一个文件 (to do by xx)(不做也行,有点麻烦)
- 【优化】【简单】data中时间格式的优化 (to do by xx)(不做也行,有点麻烦)
【优化】【简单】每隔x时间自动运行 (done by yao)- 【功能】【中等】data部分可视化 (to do by xx)
- 【功能】【中等+】通知
- 【功能】【中等++】放到服务器上自动运行
- 待补充
Views: 62