Python爬取商品评论代码怎么写？Python爬虫如何抓取京东评论

京东、淘宝、拼多多都是现在主要流行的在线购物网站，而在这些网站上购买了商品的用户就是可以发表商品评论，而这些评论也是其他买家用于参考的资料。下面文章主要介绍的内容就是，Python爬虫抓取京东商品评论的详细代码，感兴趣的话可以一起往下看看。

一、页面分析

第一步需要在浏览器打开京东网站，然后在其中选择自己需要抓取评论的商品点击进去。然后按下F12进入开发者模式查看评论都是通过哪一个接口请求到的，以及这些评论所在的html标签都是什么。

然后我们就是可以发现一个页面能够显示的评论是有限的，需要通过点击下一页按钮来切换评论页面。而切换之后网址后面的数字也会发生变化，所以只需要通过切换链接尾部数字即可实现多页面商品评论抓取操作。

二、代码编写

那么分析完页面之后就是可以来编写代码了，代码编写只需要将requests这个标准库导入进来即可。然后定义函数来实现商品评论抓取功能，函数需要三个参数，分别为抓取网址、评论起始页以及结束页。

然后在函数中定义空列表来保存抓取到评论，再通过列表推导式来构建一个商品评论抓取时可以切换的页数列表。使用for循环迭代这个列表，然后用字符串格式化语法改变url链接，再调用get()方法来爬取数据即可，详细代码示例如下所示：

import requests
import random
def params_data(id_url, num1, num2):
list_data = [i for i in range(num1, num2 + 1)]
    params_list = []
    random.shuffle(list_data)
    for page in list_data:
      par = '?productId={}&score=0&sortType=5&page={}&pageSize=10&isShadowSku=0&rid=0&fold=1'.format(id_url,page)
      response = requests.get(url= par)
      params_list.append(response)
  return params_list

以上就是关于“Python爬取商品评论代码怎么写？Python爬虫如何抓取京东评论”的全部内容了，希望对你有所帮助。