昨天收到公众号粉丝的爬虫需求：

抓取平台：天猫或者淘宝
爬取对象：某个商品的各分类的价格和库存数

因此花费两天时间抓取完成，基于python3 抓取， flask 可视化页面查看，目前支持网页可视化查看：

用途

实时监控竞品销量：

使用方式

首先在我的 github 上面下载该项目的代码，项目地址为：

代码的结构路径为：

---static ---bootstrap.min.css ---templates ---htmlWeb.py

在当前目录下运行代码

python3 htmlWeb.py

在浏览器里面打开网址：127.0.0.1:5000 显示如下页面：

只要在输入框输入商品的 id 即可

id 的来源为搜索淘宝的商品关键词后，点击进入详情页，可以在 url 中看到所需要的商品的 id 。例如搜索关键词女装，点击其中一个进入页面：

新页面的 url 中的 id 即为商品唯一的 id ：

即 url 中的 id=586378509246

如果需要基于关键字搜索商品价格等，可以查看如下项目：

爬虫代码不知道怎么写
关注公众号让作者帮你解决

原文出处：https://www.cnblogs.com/TTyb/p/10737782.html

来源：oschina

链接：https://my.oschina.net/u/4396307/blog/3265722

标签