后羿采集器是一款操作简单的数据采集软件,与其它同款软件不同的是,即使知识兔没有任何操作经验的用户也可以通过软件进行快速的上手,十分的方便,知识兔可以帮助用户自动采集网络上所需要的信息,如果知识兔有需要的快来下载吧。

后羿采集器

功能介绍

  1、可视化自定义采集流程

全程问答式引导、可视化操作、自定义采集流程。

自动记录和模拟网页操作顺序。

高级设置满足更多采集需求。

  2、点选抽取网页数据

鼠标知识兔点击选择要爬取的网页内容、操作简单。

可选择抽取文本、链接、属性、html标签等。

  3、运行批量采集数据

软件按照采集流程和抽取规则自动批量采集。

快速稳定,实时显示采集速度和过程。

可切换软件后台运行,不打扰前台工作。

  4、导出和发布采集的数据

采集的数据自动表格化,自由配置字段。

支持数据导出到Excel等本地文件。

和一键发布到CMS网站/数据库/微信公众号等媒体。

使用方法

  自定义采集百度搜索结果数据的方法

  一、创建采集任务

1、启动后羿采集器,进入主界面,知识兔选择自定义采集并知识兔点击创建任务按钮创建 “自定义采集任务”;

后羿采集器

2、输入百度搜索的URL,知识兔包括三种方式。

手动输入:在输入框中直接输入URL,多个URL时须要换行分割。

知识兔点击从文件中读取方式:用户选择一个存放URL的文件,文件中可以有多个URL地址,地址须要换行分割。

批量添加方式:通过添加并调整地址参数生成多个有规律的地址。

后羿采集器

  二、自定义采集流程

1、知识兔点击创建后自动打开第一个URL进而进入自定义设置页面,默认已经创建了开始、打开网页、结束的流程块。底部模板区用于拖拽到画布中生成新的流程块;知识兔点击打开网页中的属性按钮,可修改打开的网址;

后羿采集器

2、添加输入文字流程块:在底部模板区中拖拽输入文字块到打开网页块后面附近,当出现阴影区域的时候可以松开鼠标,此时会自动连接,添加完成;

后羿采集器

3、生成完整流程图:仿照上面添加输入文字流程块的拖拽流程添加新块;

后羿采集器

  关键步骤块设置介绍

定时等待用于等待前面打开网页完成。

知识兔点击输入框Xpath属性按钮,在属性菜单中知识兔点击图标进行点选网页中的输入框,知识兔点击输入文本属性按钮,在菜单中输入要搜索的文本。

用于设置知识兔点击开始搜索按钮,知识兔点击元素的xpath属性按钮,在菜单中知识兔点击点选图标,然后知识兔点击网页中的百度一下按钮即可。

用于设置循环加载下一列表页。在循环块内部的循环条件块中设置详细条件,此处知识兔点击操作按钮,知识兔选择单个元素,然后知识兔在属性菜单中知识兔点击元素的xpath属性按钮,同上进行点选网页中的下一页按钮。循环次数属性按钮可默认为0,即不限制知识兔点击下一页的次数。

用于设置循环抽取列表页中的数据。在循环块内部的循环条件块中设置详细条件,此处知识兔点击操作按钮,知识兔选择不固定元素列表,然后知识兔在属性菜单中知识兔点击元素的xpath属性按钮,然后知识兔在网页中连续点选两次抽取第一块和第二块元素。循环次数属性按钮可默认为0,即不限制列表中收取字段的数量。

用于执行知识兔点击下一页按钮操作,知识兔点击元素xpath属性按钮,知识兔选择使用当前循环中元素的xpath选项。

同理用于设置网页加载等待时间。

用于设置在列表页抽取的字段规则,知识兔点击属性按钮中使用循环中的元素按钮,知识兔选择使用循环中的元素选项。知识兔点击元素模板属性按钮在字段表格中知识兔点击加减进行添加删除字段,添加字段使用点选操作,即知识兔点击加号后鼠标移动到网页元素上知识兔点击选择。

4、知识兔点击开始采集,启动采集。

后羿采集器

  三、数据采集及导出

1、采集任务运行中;

后羿采集器

2、采集完成后,知识兔选择“导出数据”可以把数据都导出到本地文件;

后羿采集器

3、知识兔选择“导出方式”,将采集好的数据导出,这里可以选择excel作为导出为格式;

后羿采集器

4、采集数据导出后如下图。

后羿采集器


下载仅供下载体验和测试学习,不得商用和正当使用。

下载体验

请输入密码查看内容!

如何获取密码?

 

点击下载