火车信息采集器(LocoySpider)

列车采集器手机软件(LocoySpider)是一款网页页面爬取专用工具，是用以网址信息采集，网址信息爬取，包含照片、文本等信息采集解决发布，是现阶段应用人最多的互联网数据采集手机软件。合肥市乐维信息技术性有限责任公司荣誉出品，10年打造出网页页面数据信息采集神器。有须要的小伙伴们欢迎大家来多特下载感受。

手机软件优点：

程序流程支持远程管理图片文件，支持网站登陆后的信息获得，支持检测文档真正详细地址，支持代理商，支持防盗链的采集，支持采集数据信息立即进库和效仿人手工制作发布等很多作用特性。

列车采集器支持从一切种类的网址采集获得您所须要的信息，如各种各样新闻报道类网址、社区论坛、相应网址、求职招聘网站等。

与此同时具备强劲的网站首页采集、多张和分页查询的采集、网址跨层采集、POST采集、脚本制作网页页面采集、动态性网页页面采集等高級采集作用。

强劲的php和c#软件支持，让您可以根据二次开发完成您所想的一切更强悍的作用。

手机软件特点：

1、实用性强

不管新闻报道、社区论坛、视頻、企业黄页、照片、免费下载类网址，只需根据电脑浏览器能看见的结构型的內容，根据特定配对标准，都能采集到您所须要的內容。

2、平稳、高效率

五年磨一剑，手机软件不断创新发展，采集速度更快，特性平稳，占有資源少。

3、扩展性强、应用领域广

自定web发布，自定流行的数据库的储存和发布，自定当地php及.net外界程序编写插口解决数据信息，让数据信息都能给你常用。

菜单栏作用：

1.新创建排序

新创建一个每日任务排序，挑选隶属排序，明确分组名称和备注名称。

2.新创建每日任务

明确隶属排序，新创建一个每日任务，填好每日任务名字并储存。

3.Web发布配备

Web发布配备界定了怎样登录一个网站及其向该提交网站数据信息。

关键牵涉到登陆信息的获得，网址编号设置，频道目录的获得，及其应用数据处理发布实际效果。

4.Web发布控制模块

可以界定网站首页，获得频道目录，获得网页页面任意值，內容发布主要参数，及其文件上传，结构发布数据信息等高級作用。

5.数据库发布配备

数据库发布配备界定了数据库连接信息的设定及其数据库控制模块的挑选。

6.数据库发布控制模块

用以编写数据库的发布控制模块，便捷大家将数据信息发布到配备好的数据库中。

列车采集器可选择mysql、sqlserver、oracle、access四种数据库种类，在文字文本框中填好sql语句

（需有数据库有关专业知识），并可应用标识更换相对应数据信息。也可在采集器控制模块文件夹名称中载入某一控制模块开展编写。

7.任务计划

设定目录中采集每日任务的运行方案，可每间距、每日、每星期、仅一次、或自定Cron关系式，

（Cron关系式的书写可参照有关专业术语中的详细介绍）。储存设定后，每日任务就可以依照设定实行。

8.软件管理方法

软件是可以用于拓展列车采集器作用的程序流程

列车采集器V9支持PHP源代码、C#源代码、C#类库三种种类的软件，

可用以拓展http要求、內容解决和压缩文件下载的作用，并可以各自开展检测。

9.http二级代理

互联网中的网络服务器，可以让互联网客户去争取所须要的互联网信息。

代理商的作用有可以提升本身ip的访问权限浏览海外网站，浏览一些机构或团队內部資源，

提升电信网的ip封禁和掩藏真正的ip等。

列车采集器V9支持http代理商、socket4和socket5代理商。

10.http仿真模拟要求

可以设定怎样进行一个http要求，包含设定要求信息，回到头信息。并具备全自动上传的作用。

基本要素：

1、标准自定 - 根据采集标准的界定，可以检索所有网页采集基本上一切种类的信息。

2、多个任务，线程同步 - 可以一起开展好几个信息获得每日任务，每一个每日任务可以应用多进程。

3、眼见为实 － 每日任务采集全过程眼见为实，全过程中解析xml的连接信息、采集信息、不正确信息等都是会按时的体现在程序界面中。

4、数据信息储存 － 数据信息边采集边全自动储存到关联数据库中，而且算法设计可以全自动融入，手机软件可以依据采集标准全自动建立数据库，及其在其中的表和字段名，还可以根据导库方法灵便的将数据信息储存到顾客已经有的数据库构造中。

5、中断点续采 - 信息搜集每日任务可以在终止后从中断点逐渐再次采集，此后你用不会再担心的采集每日任务出现意外终断了。

6、网站首页 － 支持网址Cookie，支持网址数据可视化登陆，即便登陆时必须手机验证码的网址也可以采集。

7、任务计划 - 根据这一作用可以使你的采集每日任务按时、定量分析或是一直循环系统实行。

8、采集范畴限定 - 可以依据采集的深层和网址的标志来限定采集的范畴。

9、压缩文件下载 － 可以将采集到的二进制文件（例如：照片、歌曲、手机软件、文本文档这些）免费下载到系统盘或是采集結果数据库中。

10、結果更换 - 可以将采集的結果依据标准换成你界定的內容。

11、标准储存 - 可以依据某一标准来决策这些信息储存，这些信息过虑。

12、过虑反复內容 － 手机软件可依据客户设定和实际对反复內容和反复网址全自动删掉反复內容。

13、独特连接鉴别 - 应用此功用可以将用JavaScript动态性转化成的连接或别的更怪异的联接鉴别出去。

14、数据信息发布 － 可以根据自定插口，将已采集的效果数据信息发布到随意的文章智能管理系统和特定数据库中。如今已支持的总体目标发布新闻媒体包含：数据库(access, sql server,my sql,oracle) ，静态数据htm文件。

15、预埋程序编写插口 － 界定好几个程序编写插口，客户可以在事情中运用PHP,C#语言表达开展程序编写，扩大采集作用。

特色功能：

1、支持所有网页编号：极致支持采集全部编码格式的网页页面,程序流程还能够自动检索网页页面编号。

2、多种多样发布方法：支持现阶段全部流行和杀马特的CMS,BBS等网站源代码,根据操作系统的发布控制模块能完成采集器和网站源代码间的极致融合。

3、自动式：无人化工作中，配备好程序流程后，程序流程将根据您的设定自启动，彻底不用人工控制。

4、当地编写：当地数据可视化编写已采集的数据信息。

5、采集检测：这也是其他一切类似采集软件所不可以比的，程序流程支持立即查询采集結果并检测发布。

6、管理方法便捷：应用网站 每日任务方法管理方法采集连接点，每日任务支持批量操作，再多的数据库管理也很轻轻松松。

升级日志：

1、★ 目录页增加“详细地址解决”作用★

內容更换/排重

可以对网址中內容开展更换，且更换进行后，反复的网址会全自动去重复。

纯正则替换

可以应用正则表达式开展配对，和內容更换作用相近

字符集解决

网址中有必须转换格式的內容，例如摘到的连接里有 可以开展编解码

2、★增加“要求不成功数”的预警信息标准设定★

3、★保存图片取名，增加[纪录自增Id]文件格式★

纪录自增ID：同一个內容页中，好几个标识设定纪录自增ID，那麼好几个标识都是以1逐渐自增，再度稳定性测试又会继续从1自增，拆换个內容页稳定性测试，也是1逐渐自增。

自增ID：设定自增ID是采集器运行后运作，逐渐一个自增ID，从1逐渐自增，以后便是自增。重新启动采集器后，又会从头开始自增ID，从1逐渐自增。

4、★修补图片下载误分辨难题★

5、★修补任务计划中“每日生产调度”，起止运作時间配备未提交的难题★

6、★ 修补PHP软件，针对循环系统纪录的解决出错的难题★

7、★修补拼音字母首写针对一些不正确标识符的分辨难题★

8、★每日任务大批量编写，修补“发布”中“多网址乱序发布”无法拷贝的难题★

9、★改动“循环系统加上新纪录”配备后，修补数据类型挑选问题的难题★

10、★修补循环系统纪录中目录页标识被数次解决的难题★

11、★修补针对一些302自动跳转详细地址，没法恰当自动跳转的难题★

12、★修补一些网址没法恰当要求的难题★