火车采集器

火车采集器

大小:31.11MB 时间:2023-11-06

语言:简体中文 环境:Windows7, Windows10, WindowsAll

请使用PC访问此页面下载

注:本软件为PC版,PC软件不适用于移动端。

简介

火车采集器是一款电脑网络检测工具,该软件能对目标网站进行整站采集,从源码完整采集并且支持批量任务,功能非常强大,对于SEOer来说非常实用,快下载使用吧!

软件介绍

火车头采集器是一款可以帮助您采集网页数据的工具,通过该软件,你可以一键设置采集的地址,输入需要搜索的类型、图片、文字、flash 动画等资源,就可以马上分析您的URL地址,将得到的数据信息发送到指定的文件保存,方便您搜索下载网络上的信息;火车头采集器可以实现多线程搜索管理,您可以同时加载多个网页地址,并开启不同的搜索方式,实现批量搜索下载文件处理,提高收集资源的速度,需要的朋友可以下载试试!

软件功能

火车采集器可以通过网址采集规则的设定,快速采集到所需的网址信息。可手动输入、批量添加或直接从文本导入网址,并能自动筛选去除重复的网址信息。

支持多级页面网址的采集,多级网址采集可以使用页面分析自动得到地址、手动填写规则两种方式。应对多级分页中内容不同,但地址相同的页面网址采集,火车采集器设置了 GET,POST 和 ASPXPOST 三种 HTTP 请求方式。

火车采集器支持网址采集测试,可以验证操作的正确性,避免操作有误导致采集结果不准确。

车采集器将数据采集下来后默认将数据保存在本地数据库(sqlite、mysql、sqlserver),用户可以根据自己的需求选择对数据的后续操作以完成数据发布,支持直接查看数据、在线发布数据和入数据库,并支持用户进行发布接口的使用和开发。

根据数据库类型用相关软件打开可以直接查看数据,配置一个发布模块即可将数据在线发布到网站,可以设置自动登陆网站,获取栏目列表等;如果入到用户自己的数据库中,用户只需写几个 SQL 语句,程序就会按照用户的 SQL 语句导入数据;保存为本地文件时支持本地 SQL 或文本文件(word、excel、html,txt)格式。

软件特色

全网通用

基于 web 结构的采集

火车采集器的采集原理是基于 web 结构的源代码提取,几乎适用于所有的网页,以及网页中能够看到的所有内容;

扩展性强

火车采集器支持接口和插件多种扩展延伸,打破操作局限,满足更加多样化的使用需求,使火车采集器真正做到全网通用。

功能全面

集采集发布于一体

火车采集器在每个功能上都做了优化设置,除了最基础的数据采集,更是融入了强大的数据处理和数据发布功能,全面完善了对于数据利用的整个流程。

高效稳定

分布式高速采集系统

火车采集器采用分布式高速采集系统,将任务分配至多个服务端同时运行采集,多任务多线程式的运行模式,能够最大化提升运行效率。

占用资源少

任务量得以分解,服务端所占用资源减少,使得火车采集器的性能更加稳定。

数据精准

采集监控系统

实时地监控采集,任务运行日志报错统计,及时修复,确保数据不被遗漏。

数据处理准确

多种精细化的数据处理方式,结合测试功能让火车采集器做到数据采集无误,精准可用。

安装方法

下载后解压rar,打开exe文件,下一步

火车采集器安装图片1

同意协议,下一步

火车采集器安装图片2

选择安装路径后,下一步

火车采集器安装图片3

等待进度条完成后

火车采集器安装图片4

安装完毕。

火车采集器安装图片5

更新日志

1: 自动获取cookie功能优化

2: 数据库发布增加事务,优化数据库发布速度

3: 数据转换速度优化(针对Mysql和SqlServer数据库的导入), 同时去除网址库的清空逻辑

4: html标签处理错误问题处理

5: json提取关于数字转换为科学计数法问题处理

6: 发布测试时,图片上传无效的问题处理

7: 采集内容页处理错误时,增加对于当前出错标签的提示,以便快速定位出错标签

8: 任务批量编辑,增加可操作范围

9: 循环匹配匹配空格问题处理

10: 刷新分组中增加统计数据的刷新

11: post分页处理

12: 部分功能逻辑优化

展开所有内容 ↓
收起所有内容 ↑

推荐下载

相关文章