网页采集排错教程:八爪鱼
1、本教程主要讲的是如果你在使用八爪鱼采集时遇到一些问题,如何快速找出错误、解决错误或者如何了解错误、更好的和客服沟通的方法。八爪鱼采集器主要通过技术将用户浏览网页的操作进行定位和模拟来收集数据,用户不需要明白网页架构、数据采集原理等技能,通过八爪鱼采集器就可以构成八爪鱼可以看懂的、可以循环工作的采集流程。如果存在采集模式不满足需求的情况,排错后面有更加详细的教程采集过程中出现的错误可以归类为五个方面,分别是网页问题、规则问题、定位模拟问题、采集器问题、以及云端问题,当采集出现异常时,请先按照如下流程进行错误排查,寻找问题类型:
2、(1)手动执行一遍情写硎霈规则:打开界面右上角的流程图,用鼠标点击流程图内规则,从上至下,每次点击下一步都有相应反应,没有发生反应的步骤则是问题出现步骤。注意点:a.循环内的点击以及提取元素要手动选择循环中除第一个以外的内容,防止循环失效,只点击提取循环内第一个元素b.所有规则每一步执行完才执行下一步,网页未加载完全,即浏览器上圆圈等待图标未消失时,观察网页内容是否加载完全,如果加载完全可以自行取消加载,再配置规则。(2)进行单机采集,查看采集结果中未采集到数据的项目。注意点:规则中最好加入当前网址,这样出现未采集到数据的项目,可以复制网址在浏览器中打开查看原因,确定错误。

4、循环内的点击或采集只发生于第一条内容,点击第二条内容依然采集到第一条内容时原因:规则问题,定位模拟问题解决方法:查看循环当中的第一项是否勾选点击当前循环中设置的元素这一项

6、(2)单机采集采不到数据可能原因有4种:1.单机运行规则,数据还没采完便显示采集完成此种现象分为3种情况A.打开网页后直接显示采集完成原因:网页问题,第一个网页加载过慢,八爪鱼会等待一段时间,超出一定时间还在加载八爪鱼就会跳过了这个步骤,后续步骤以为内容未加载出来采不到数据,八爪鱼就结束了任务,造成采集不到数据。解决方法:将网页的超时时间加长,或者在下一个步骤设置执行前等待,让网页有足够长的时间加载。
