翻页采集一共586页,只采集到180页就结束了是什么原因
举报 使用道具
| 回复

共 2 个关于本帖的回复 最后回复于 2021-7-21 16:20

沙发
wangyong 版主 发表于 2021-7-21 16:04:03 | 只看该作者
规则名发一下
举报 使用道具
板凳
maomao 论坛元老 发表于 2021-7-21 16:20:38 | 只看该作者
可能的原因:
1. 手工翻一下这个网页,能翻到最后吗?有些网页实际有翻页限制,翻到某一页,就不让往下翻了

2.  打开180页,或者181页,对着这个页面加载任务,看看有没有错误。

如果有错误,要修改规则,一般是要加上定位映射,使规则的适应性更好。








举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-20 09:23