首页 > 新闻 >正文

对评论数据的url发起请求Python爬虫爱好者一枚

2021-10-07 22:17   来源:TechWeb阅读量:6162       

前言

大家好!我是古月星辰,大三本科生,数学专业,Python爬虫爱好者一枚今天给大家带来JD数据的简单采集和可视化分析,希望大家可以喜欢

一,目标数据

伴随着移动支付的普及,电商网站不断涌现,由于电商网站产品太多,由用户产生的评论数据就更多了,这次我们以京东为例,针对某一单品的评论数据进行数据采集,并且做简单数据分析。

二,页面分析

这个是某一手机页面的详情页,对应着手机的各种参数以及用户评论信息,页面URL是:

然后通过分析找到评论数据对应的数据接口,如下图所示:

它的请求url:

注意看到这两个关键参数

1. productId: 每个商品有一个id

2. page: 对应的评论分页

三,解析数据

对评论数据的url发起请求:

分析可知,评论url中对应十条评论数据,对于每一条评论数据,我们需要获取3条数

据,contents,color,size。

五,简单数据 1.简单配置 #导入相关库importpandasaspdimportmatplotlib.pyplotasplt#这两行代码解决plt中文显示的问题plt.rcParams=plt.rcParams=False#由于采集的时候没有设置表头,此处设置表头data=pd.read_excel)#data.head()

2.手机颜色数量对比 x=('白色','黑色','绿色','

声明:本网转发此文章,旨在为读者提供更多信息资讯,所涉内容不构成投资、消费建议。文章事实如有疑问,请与有关方核实,文章观点非本网观点,仅供读者参考。

相关热词搜索:

上一篇: 莲花县房楼镇岩北村的占地6亩的七彩稻田画格外醒目吸引游客前来流连忘返
下一篇:最后一页