11#
ym 版主 发表于 2016-11-3 15:48:16 | 只看该作者
本帖最后由 ym 于 2016-11-3 15:50 编辑
qiukaibin 发表于 2016-11-3 15:17
这个是我重新设置规则后的输出语句,可以导出第一步数据,之后连续动作的应该是无法输出,它显示的是上 ...

加载你的规则,分析发现,第一次点击年份后,class值就变了,所以爬虫提示定位失败。


但是id值是不变的,所以,改为用id值来定位就准确了,测试采集也是正常的,还有,感觉网页加载比较慢,建议把滚屏次数调大点,这样爬虫就会延长等待加载网页的时间,可以确保采集完整


举报 使用道具
12#
qiukaibin 新手上路 发表于 2016-11-3 15:56:11 | 只看该作者
ym 发表于 2016-11-3 15:48
加载你的规则,分析发现,第一次点击年份后,class值就变了,所以爬虫提示定位失败。

恩恩 谢谢你!!!终于解决了,感谢你
举报 使用道具
13#
ym 版主 发表于 2016-11-3 15:57:57 | 只看该作者
你的规则还有一个大问题,就是乱勾下级线索,不是网址就不要勾下级线索,它的作用是通过网址,找到下级网页来做层级采集,所以,把你规则里的下级线索都取消勾选

举报 使用道具
14#
qiukaibin 新手上路 发表于 2016-11-3 16:15:12 | 只看该作者
好的 谢谢 麻烦你了
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-5-17 13:21