火车采集器(LocoySpider) v10.0.21.705免费版

LocoySpider是一款专业且功能强大的网络数据/信息挖掘软件。通过灵活的配置，您可以轻松地从网页上抓取任何资源，如文字、图片和文件。

该程序支持图片文件远程下载、网站登录后信息获取、文件真实地址检测、代理、防盗链采集、采集数据直接存储、模仿者手动发布等。

Train collector支持从任何类型的网站，如各种新闻网站、论坛、电商网站、求职网站等，收集和获取你需要的信息。

同时具有强大的网站登录集合、多页分页集合、网站跨层集合、POST集合、脚本页面集合、动态页面集合等高级集合功能。

强大的php和c#插件支持使您可以通过二次开发实现任何更强大的功能。

软件功能

1.通用性强。

无论是新闻、论坛、视频、黄页、图片还是下载网站，只要能通过浏览器看到结构化的内容，通过指定匹配规则，就能收集到自己需要的内容。

2.稳定高效。

经过五年的努力，软件不断更新完善，采集速度快，性能稳定，资源少。

3.扩展性强，应用范围广。

自定义网络发布，保存和发布主流数据库，自定义本地php和。net外部编程接口来处理数据，让数据可以被你使用。

菜单功能

1.创建一个新组。

创建新的任务组，选择该组，并确定组名和注释。

2.创建新任务。

确定分组，创建新任务，填写任务名称并保存。

3.Web发布配置。

网络发布配置定义了如何登录网站并向网站提交数据。

主要涉及登录信息的获取、网站编码的设置、栏目列表的获取、使用数据测试发布效果。

4.网络发布模块。

可以定义网站登录、获取栏目列表、获取网页随机值、内容发布参数、上传文件、构建发布数据等高级功能。

5.数据库发布配置。

数据库发布配置定义了数据库链接信息的设置和数据库模块的选择。

6.数据库发布模块。

用于编辑数据库的发布模块便于我们将数据发布到已配置的数据库。

Train collector可以选择mysql、sqlserver、oracle和access，并在文本输入框中填写sql语句。

(需要数据库知识)，标签可以用来替换相应的数据。您也可以在收集器模块文件夹中加载模块进行编辑。

7.计划任务。

在列表中设置采集任务的启动时间表，可以每隔一段时间，每天，每周定义一次Cron表达式，

(Cron表达的写法可以参考相关术语的介绍)。保存设置后，可以根据设置执行任务。

8.插件管理

插件是可以用来扩展列车收集器功能的程序。

Train collector V9支持PHP源代码、C#源代码和C#类库。

它可以用来扩展http请求、内容处理和文件下载的功能，并且可以单独测试。

9.http辅助代理。

网络中的服务器可以让网络用户获得自己需要的网络信息。

代理的功能是突破自身ip的访问限制，访问外地站点，访问一些单位或组织的内部资源。

突破电信ip封锁，隐藏真实ip。

列车收集器V9支持http代理、socket4和socket5代理。

10.http模拟请求。

您可以设置如何发起http请求，包括设置请求信息和返回标头信息。并具有自动提交的功能。

基本功能

1.规则定制——通过收集规则的定义，你可以搜索所有的网站来收集几乎任何类型的信息。

2.多任务和多线程-可以同时执行多个信息获取任务，每个任务可以使用多个线程。

3.你看到的就是你得到的——你看到的就是你在任务收集过程中得到的，过程中遍历的链接信息、收集信息、错误信息都会及时反映到软件界面中。

4.数据保存-数据在收集时自动保存到关系数据库中，数据结构可以自动调整。软件可以根据采集规则自动创建数据库及其表和字段，也可以通过对数据库的引导，灵活地将数据保存到客户现有的数据库结构中。

5.断点处的连续收集-信息收集任务停止后可以继续从断点处收集，您不再需要担心收集任务的意外中断。

6.网站登录-支持网站Cookie和可视化登录，即使网站在登录时需要验证码。

7.计划任务-此功能允许您以循环方式定期、定量或连续执行收集任务。

8.收藏范围的限制——收藏范围可以根据收藏深度和网站标识进行限制。

9.文件下载-收集的二进制文件(如图片、音乐、软件、文档等。)可以下载到本地磁盘或收集结果数据库。

10.结果替换-您可以根据规则用您定义的内容替换收集的结果。

11.条件保存-您可以根据特定条件决定保存哪些信息以及过滤哪些信息。

12.过滤重复内容-软件可以根据用户设置和实际情况自动删除重复内容。

13.特殊链接识别——使用这个功能，你可以识别由JavaScript或者其他奇连接动态生成的链接。

14.数据发布-收集的结果数据可以通过用户定义的界面发布到任何内容管理系统和指定的数据库。支持的目标发布媒体现在包括：数据库(access、sql server、my sql、oracle)和静态htm文件。

15.预留编程接口——定义多个编程接口，让用户可以使用PHP和C #语言编程事件，扩展集合功能。

特色功能

1.支持所有网站代码：完美支持所有编码格式的网页集合，程序可以自动识别网页代码。

2.多种发布方式：支持当前所有主流和非主流的CMS、BBS等网站程序，通过系统的发布模块实现采集器与网站程序的完美结合。

3.全自动：无人值守。程序配置完成后，程序会根据您的设置自动运行，无需人工干预。

4.本地编辑：在本地可视化编辑收集的数据。

5.采集测试：这是其他类似采集软件无法比拟的。该程序支持直接查看采集结果以及测试和发布。

6.易于管理：采集节点由站点任务管理，支持批量操作，易于管理更多数据。

更新日志

列车收集器V10.0版本。

1.支持在数据采集中调用其他标签的值作为截取条件。

2.数据采集支持css选择器。很多网页都有独特的CSS属性。这个功能更有利于批量从网页中提取数据。

3.增加关联区功能，可以截取网页中指定区域的内容进行收集处理。

4.批量网站增加了间隔变化增加网站的方式，以适应更多的网址变化方式。

5.批量设置：添加新增加功能的批量设置。

6.运行统计日志设置添加默认关闭功能，可以在设置中打开或关闭。

7.修复7.oss相关问题。

8.地址空间问题导致列表页标签错误问题修复。

9.下载相关问题修复程序。

10.修复任务数据批量处理中删除为空的无效记录。

11.文件下载插件增加了文件下载的后处理接口。