草庐IT

Python爬携程指定景点评论的用户、评论内容及时间(景点黄龙溪为例)

整个分享分为下面几个部分:目录1.导入所需的库2.设定三个变量存储从爬取的评论数据中提取的信息3.爬取指定页面数(total_pages)的评论数据。4.设定postURL6.找到景点的poild并填写在代码中问题1:有时候Poild会被隐藏,所以可能需要多试几次。(或者新开一个浏览器窗口复制打开)7.发送POST请求到指定的postUrl,并加载响应的JSON数据。8.爬取评论接口数据,提取评论信息。9.将评论数据转换为DataFrame格式,再保存为Excel文件问题2:有955条评论的,但是只能爬到700多条,现下只能解决到这种程度了,求教希望知道怎么做的小伙伴)下面为全部代码,如果你着