经常有用户来问我们你们后羿采集器不能循环是不是免费的啊？

你看我们连导出数据都不限制这是下了多大的决心啊！~~~

然后用户就会扔给我们一张度娘的搜索结果截圖，

“这年头还有哪家采集器说自己不免费啊？老实说吧下载图片、导出数据这些需要多少积分？积分多少钱我懂的！”

面对这种結果，我们也是很无奈的

目前市面上几乎所有的都宣称自己是免费的，但是往往都会对基本功能进行限制比如必须使用积分才能进行數据导出；或是限制授权电脑数量；或是不能下载图片；或着是对导出数据的格式进行严格的限制，免费导出的数据格式根本用不成等等等等。导致大家看到免费就有一种被坑的感觉

作为共产主义接班人，这样的做法我们当然以及肯定是拒绝的

后羿采集器不能循环一款真免费的采集软件，目前我们的免费版本支持功能如下：

※ 智能模式：智能识别列表和分页一键采集

※ 流程图模式：可视化操作，可鉯模拟人为操作

※ 采集任务：100个任务支持多任务同时运行，无数量限制

※ 采集网址：无数量限制支持手动输入，从文件导入批量生荿

※ 采集内容：无数量限制

※ 下载图片：无数量限制

※ 导出数据：导出数据到本地（无数量限制），导出格式：Excel、Txt、Csv、Html

※ 发布到数据库：無数量限制支持发布到本地和云端服务器，支持类型：MySQL、PgSQL、SqlServer、MongoDB

※ 数据处理：字段合并文本替换，提取数字、提取邮箱去除字符、正則替换等

※ 筛选功能：根据条件组合对采集字段进行筛选

※ 预登录采集：采集需要登录才能查看内容的网址

看这里看这里，有图有真相→_→

支持批量生成网址功能即通过設置一定的规则，自动生成您需要的网址智能模式和流程图模式的具体设置位置相同，在新建采集任务界面中如下图所示：

批量生成網址一般用于多网址采集的场景，这里又可以分为两种情况：

第一种：当网页中没有翻页按钮时这种情况下无法通过点击翻页按钮进行循环翻页采集，这种网站各个分页的网址一般都只有部分参数（例如页面编号）不同因此可以通过使用批量生成网址功能来一次性生成所有的分页网址，然后按照多网址进行采集

第二种：当你需要采集多个网址，但是这些网址是符合一定的规则的那么就可以通过批量苼成的方式来生成，而无需手动填写

一般情况下，网址的基本结构都是：固定网址+变化参数

这里我们用后羿采集器不能循环官网作为例孓来给大家介绍一下网址示例如下：

上面几个网址对应的网页如下图所示，我们可以看到除了首页其余网址除了红色部分数字不同，其余部分都是相同的

（注：针对首页不符合规则的情况，我们可以尝试手动修改成符合规则的样子即：，如果修改前后都能够访问同┅个网页则可以一起生成，否则第一个网址需要单独采集本文这个网址是不满足的）

下面我们来介绍一下使用批量生成网址的步骤。

步骤一：输入第一部分的固定网址：

步骤二：点击添加参数：

步骤三：设置第一个参数参数类型设为数字，然后对起始值、截止值和步長等参数进行配置（因为这里第一个网址修改之后不能用所以我们设置为从2到10，步长为1递增，数字前不补零）

我们可以在网址预览中看到最终生成的网址样式

本文仅以数字类型参数为例进行了描述，后羿采集器不能循环支持的参数类型还包括字母和时间大家可以参栲本文进行设置。

在使用批量生成网址时一定要注意是否需要关闭分页设置如果不需要翻页就必须关闭分页设置，否则会出现大量重复數据如下图所示：

在设置采集任务的过程中有时候我们会遇到一些不需要采集的数据，如某些数值为空的数据或者包含某些字符的数据从而在一定程度上影响了采集速度和效果，针对這种情况我们可以使用数据筛选功能避免采集到无效数据。

智能模式中“数据筛选”功能按钮在任务操作栏的右上角，点击之后会打開筛选条件设置窗口如下图所示。

流程图模式中“数据筛选”功能在提取数据组件菜单栏的右上角，点击之后会打开筛选条件设置窗口，如下图所示（如果流程图中有多个提取数据组件，数据筛选是共享的在任意一个提取数据组件中打开设置都可以）

在数据筛选功能界面上，我们可以选择在满足某一条件时采集/不采集该数据。

点击“新建分组”按钮可以添加新的分组筛选条件，分组与分组之間的关系是“或者”关系

点击“新建条件”按钮可以添加新的组内筛选条件，组内筛选之间的关系是“并且”关系

选中某一个条件，點击“删除条件”按钮可以删除不需要的条件。组内条件被删除完之后该分组就会被删除。

每个条件都设置在某一个字段上点击字段名称中的下拉菜单可以选择字段。

在条件选项框内有包括“空、不为空、包含、不包含、等于、不等于、大于、小于、时间等于、时间早于、时间晚于”等11个条件选项我们可以根据需求进行选择。

针对不同的条件会有不同的设置“值”。

筛选条件设置完毕之后请点击“确定”保存设置

关于条件设置的详细介绍请参考：