5 8083

层级采集出现问题

wanyy063700 于 2019-3-2 11:33 发表 [复制链接]
本帖最后由 wanyy063700 于 2019-3-2 11:38 编辑


这里按照视频确定好第一层级抓取内容后,在岗位链接处添加下级搜索,并保存。


QQ图片20190302041625.png
然后在第二层级抓取,这里跟视频不一样的是层级1整理箱和层级二整理箱并在了一起。我设置好第二层级后,开始采集会出现验证规则不匹配的错误。

这里的验证规则是规则_1,请问要重新设置吗
举报 使用道具
| 回复

共 5 个关于本帖的回复 最后回复于 2019-3-2 17:04

maomao 论坛元老 发表于 2019-3-2 11:41:52 | 显示全部楼层
举报 使用道具
Fuller 管理员 发表于 2019-3-2 11:43:32 | 显示全部楼层
你的规则的主题名是什么?有主题名才能加载。

我看到第二级只采集了“要求”,用了定位标志映射,在DOM上那个class值是什么?截图没有截全。
举报 使用道具
Fuller 管理员 发表于 2019-3-2 16:51:06 | 显示全部楼层
第一级有这几个问题:问题1:应该设置样例复制映射,参看《采集列表数据》,这样才能把所有学校采集下来
样例复制20190302164832.png

问题2:应该选择偏好class,以提高规则的适应性
偏好20190302164902.png
举报 使用道具
Fuller 管理员 发表于 2019-3-2 16:58:11 | 显示全部楼层
定义第二级的时候,应该先选择菜单 规则-》新建规则, 把工作台清理掉。你这个规则里面含有第二级的整理箱,会采集失败,现在可以采用删除功能,先选中这个整理箱,再把这个整理箱删掉
删除20190302165636.png

同样,在爬虫路线工作台上,也要删除上一级的线索
删线索20190302165720.png
举报 使用道具
Fuller 管理员 发表于 2019-3-2 17:04:05 | 显示全部楼层
第二级有个问题
定位标志20190302170116.png
我看到你用红框中的定位标志做了定位标志映射,本来定位标志映射可以提高规则的适应性,不是必做的,只是为了提高适应性,但是这个网站不能用红框的,因为不同网页这个标志不一样。
那么要必看这个定位标志,而是用红色箭头的那个节点做定位标志,因为那个是所有网页都一样的。
而蓝色箭头那个节点可以用来做内容映射。
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-3-29 16:34