建立一个规则,测试时只爬一条线索是没问题的,但爬100条时,每条线索翻页只翻几次就不翻了,直接跳到下一条线索,这是为什么???
举报 使用道具
| 回复

共 5 个关于本帖的回复 最后回复于 2017-1-13 09:52

沙发
xandy 论坛元老 发表于 2017-1-11 16:13:03 | 只看该作者
规则名
举报 使用道具
板凳
qingmu888 中级会员 发表于 2017-1-11 16:58:57 | 只看该作者
规则名是X男鞋链接,麻烦啦~
举报 使用道具
地板
xandy 论坛元老 发表于 2017-1-11 17:20:23 | 只看该作者
qingmu888 发表于 2017-1-11 16:58
规则名是X男鞋链接,麻烦啦~

测试了你的规则,我添加了三个线索,分别是12页、25页和53页,都很顺利的抓完了,规则没有问题,翻页也没问题。
举报 使用道具
5#
qingmu888 中级会员 发表于 2017-1-12 15:38:38 | 只看该作者
谢谢,但是为什么有些链接只爬了十几页就爬不了,总是显示超时,抓取出错?
举报 使用道具
6#
ym 版主 发表于 2017-1-13 09:52:48 | 只看该作者
qingmu888 发表于 2017-1-12 15:38
谢谢,但是为什么有些链接只爬了十几页就爬不了,总是显示超时,抓取出错? ...

看看这篇文章检查一下http://www.gooseeker.com/doc/thread-616-1-1.html

举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-5-11 02:57