02.25 爬虫学习十之京东案例需求分析

需求:抓取京东手机数据

首先访问京东是,搜索手机

爬虫学习十之京东案例需求分析

分析页面中我们需要的数据:

首先是商品图片、价格、标题,详情信息

爬虫学习十之京东案例需求分析

我们看源码中有没有我们需要的数据:

右键快键菜单,查看源码

爬虫学习十之京东案例需求分析

源码

爬虫学习十之京东案例需求分析

可以找第一个手机数据的源码对应部分

爬虫学习十之京东案例需求分析

爬虫学习十之京东案例需求分析

从这个地方可以找到手机商品的价格和标题(找到价格和标题了)

爬虫学习十之京东案例需求分析

图片我们先找到名字,方法如下:

右键图片,在快捷菜单中,新标签页中打开

爬虫学习十之京东案例需求分析

这就找到图片的名字了

5da6d4ebE9747a490/8b167328e1dadff8.jpg

爬虫学习十之京东案例需求分析

用这个名字在源码中搜索,如果找到,说明也有图片信息(也找到了图片)

爬虫学习十之京东案例需求分析

商品详情页就是超链接,我们查看下,点击商品

爬虫学习十之京东案例需求分析

在弹出的页面,就可以看到超链接了

爬虫学习十之京东案例需求分析

在源码中我们搜索(找到超链接了)

爬虫学习十之京东案例需求分析

这个就是一个帮助我们的商品编号

爬虫学习十之京东案例需求分析

查看源码可以看到sku这个词

爬虫学习十之京东案例需求分析

另外我们发现商品下面有这几个小图片的种类

爬虫学习十之京东案例需求分析

在源码的地方,又出现一个词spu

爬虫学习十之京东案例需求分析

这个spu和sku就是

Spu(standard product unit 标准产品单位) 手机就是一个spu

Sku(stock keeping unit 库存量单位) 耀夜黑手机就是一个sku

所以我们要抓取的就是sku

爬虫学习十之京东案例需求分析

爬虫学习十之京东案例需求分析


分享到:


相關文章: