舆情分析 - JD数据翻页抓取_jd 数据抓取-CSDN博客

网站介绍:文章浏览阅读667次。JD数据翻页抓取前面已经做到评论分页抓取。但是JD搜索出的产品通常不止一页,我们也要对产品进行分页获取。然后在对每个产品进行分页抓取评论。实践index_page: 在这里进行搜索分页判断,如果有多个页面就 for i in range(1, int(page)) 来循环抓取detail_page: 这里是详情页面,跟之前的相比,优化了评论页数的判断。因为JD评论大于6页,..._jd 数据抓取