爬山虎采集器是一款能采集99%的网站数据,包括单页应用,Ajax加载等等动态类型网站。并且生成Exce表格,api数据库文件等内容。是一款简单易用的网页数据采集器,爬山虎采集器更是是新一代的智能采集软件,采用可视化界面,一键采集,无需编程,智能分析,简单易用,内置一套高速
浏览器内核,加上HTTP引擎模式,实现快速采集数据。只需根据软件提示在页面中进行点击操作,完全符合人为浏览网页的思维方式,简单几步即可生成复杂的采集规则,结合智能识别算法,任何网页的数据都能轻松采集。可模拟操作,输入文本、点击、移动鼠标、下拉框、滚动页面、等待加载、循环操作和判断条件等。后羿采集器提供丰富的采集功能,无论是采集稳定性或是采集效率,都能够满足个人、团队和企业级采集需求。 定时采集,自动导出,文件下载,加速引擎,按组启动和导出,Webhook,RESTful API,智能识别SKU和电商大图等。
软件特色
1、向导模式
简单易用,轻松通过鼠标点击自动生成脚本
2、定时运行
可按照计划定时运行,无需人工
3、独创高速内核
自研的浏览器内核,速度飞快,远超对手
4、智能识别
对于网页中的列表、表单结构(多选框下拉列表等)能够智能识别
5、广告屏蔽
定制的广告屏蔽模块,兼容AdblockPlus语法,可添加自定义规则
6、多种数据导出
支持Txt 、Excel、MySQL、SQLServer、SQlite、Access、网站等
核心技术
7、自动识别列表数据,通过智能算法,一键提取数据。
8、自动识别分页技术,通过算法智能识别、采集分页数据
9、混合浏览器引擎和HTTP引擎,兼顾了易用性和效率。
软件功能
1、路由拨号功能
原理是通过脚本自动登陆到路由器中,找到其中的网络的连接、断开功能,先断开网络,再重新连接从而实现切换IP。 界面和操作与编辑采集前脚本类似。
2、ADSL 拨号
支持本地ADSL拨号,以及动态IP拨号(淘宝上有很多卖的),以及重拨。
3、高级过滤功能
通过设置一些条件过滤掉指定类型的数据,条件包括(不得包含、必须包含、数字小于、数字大于、日期大小等)
使用流程
1、输入采集网址
打开软件,新建任务,输入需要采集的网站地址。
2、智能分析,全程自动化提取数据
进入到第二步后,爬山虎采集器全自动智能分析网页,并且从中提取出列表数据。
3、导出数据到表格、数据库、网站等
运行任务,将采集到的数据导出为Csv、Excel以及各种数据库,支持api导出。
更新日志
爬山虎采集器 2.2.0更新:
1、修复分页的采集优先级
2、提前检验xpath和正则的正确性
3、其他使用了Inputbox的验证修改
4、增加数据处理-前后缀
5、修复英文系统下乱码问题
6、修复小分辨率下,窗口超过屏幕问题
7、新增路由拨号和adsl拨号功能
8、对等待命令增加等待某元素
9、修复form的解析
10、任务列表按时间顺序排列
11、完善探测列表数据(列表就是a元素
12、修复下载文件无后缀问题
13、新增高级过滤功能
14、添加鼠标和键盘的模拟操作
15、增大滚动页数
0条评论