火车头采集点击加载列表站点方法ajax「火车头ajax无限加载采集」

今天来说一下,想必很多使用火车头采集器爬取正常列表带有上一页下一页的站点很轻松,但是遇到列表是点击加载翻页就放弃了,这里分享一下火车头采集js分页点击加载ajax列表站点方法。

1、首先在目标页面按F12Ctrl+Shift+C打开检查元素,然后点击Network选项卡

图片[1]-火车头采集点击加载列表站点方法ajax「火车头ajax无限加载采集」-淡墨源码网

2、点击XHR按钮,在页面上触发ajax加载,浏览器会监听页面数据的执行和变化

图片[2]-火车头采集点击加载列表站点方法ajax「火车头ajax无限加载采集」-淡墨源码网

红框中可以看到请求方式和请求网址

图片[3]-火车头采集点击加载列表站点方法ajax「火车头ajax无限加载采集」-淡墨源码网

然后点击荷载可以看到发送的数据

3、将获取到的信息填写到火车头采集器

图片[4]-火车头采集点击加载列表站点方法ajax「火车头ajax无限加载采集」-淡墨源码网

然后就可以获取文章页url了

图片[5]-火车头采集点击加载列表站点方法ajax「火车头ajax无限加载采集」-淡墨源码网

© 版权声明
THE END
喜欢就支持一下吧
点赞1
分享
评论 共2条

请登录后发表评论