爬取携程景点评论数据【最新方法】,分析AJAX实现页数跳转的爬取方法_连续爬取携程列表中景点的具体评论-CSDN博客

网站介绍:文章浏览阅读5.5k次,点赞22次,收藏81次。本文仅供技术学习使用,欢迎转载,转载请注明出处因为朋友参加数学建模,需要景点数据,而我刚好懂一点点,就帮他写爬虫代码。在网上搜索到一些爬虫方法,但在获取景点ID时,发现现在携程的Request Payload参数发生变化,导致原本的一些参数,如翻页的请求Fetch,景点ID:viewid没有了,经过分析发现使用了poiID作为新的参数,故自己重新针对新的接口参数重新写了爬虫,同时对爬取通过ajax实现的翻页的数据进行总结,如有错误,还望包涵并指出!PS:携程原本的接口参数还是能正常使用,也可以._连续爬取携程列表中景点的具体评论