爬山虎采集器是一款简单实用的网页数据采集软件,一款免费的网页爬虫工具。它可以采集互联网上大部分网站数据,并且将数据导出为各种格式的文件或者数据库,比如csv、excel、mysql、sqlserver、sqlite、access,甚至可以通过指定接口发布到你的网站。软件采用可视化界面,一键采集,无需编程,智能分析,需要的朋友快来下载吧!
爬山虎采集器功能
向导模式
简单易用,轻松通过鼠标点击自动生成
脚本定时运行
可按照计划定时运行,无需人工
独创高速内核
自研的浏览器内核,速度飞快,远超对手
智能识别
对于网页中的列表、表单结构(多选框下拉列表等)能够智能识别
广告屏蔽
定制的广告屏蔽模块,兼容AdblockPlus语法,可添加自定义规则
多种数据导出
支持Txt 、Excel、MySQL、SQLServer、SQlite、Access、网站等
软件优势
一键提取数据
简单易学,通过可视化界面,鼠标点击即可抓取数据
快速高效
内置一套高速浏览器内核,加上HTTP引擎模式,实现快速采集数据
适用各种网站
能够采集互联网99%的网站,包括单页应用Ajax加载等等动态类型网站
软件安装教程
1、双击打开PashanhuV2Setup.exe安装文件,进入欢迎界面,点击下一步
2、选择安装位置,系统默认“C:\Program Files (x86)\PashanhuV2”,可以点浏览选择,之后点安装
3、安装完成就可进行数据采集了
软件使用说明
第一步:输入采集网址
打开软件,新建任务,输入需要采集的网站地址。
第二步:智能分析,全程自动化提取数据
进入到第二步后,爬山虎采集器全自动智能分析网页,并且从中提取出列表数据。
第三步:导出数据到表格、数据库、网站等
运行任务,将采集到的数据导出为Csv、Excel以及各种数据库,支持api导出。
问题解答
问:如何过滤列表中的前N个数据?
1.有时我们需要对采集到的列表进行过滤,比如过滤掉第一组数据(在采集表格时,过滤掉表格列名)
2.点击列表模式菜单中的,设置列表xpath
问:如何抓包获取Cookie,并且手动设置?
1.首先,使用谷歌浏览器打开要采集的网站,并且登陆。
2.然后按下 F12,会出现开发者工具,选择 Network
3.然后按下F5,刷新下页面, 选择其中一个请求。
4.复制完成后,在爬山虎采集器中,编辑任务,进入第三步,指定HTTP Header。
更新内容
1、修复分页的采集优先级
2、提前检验xpath和正则的正确性
3、其他使用了Inputbox的验证修改
4、增加数据处理-前后缀
5、修复英文系统下乱码问题
6、修复小分辨率下,窗口超过屏幕问题
7、新增路由拨号和adsl拨号功能
8、对等待命令增加等待某元素
9、修复form的解析
10、任务列表按时间顺序排列
11、完善探测列表数据(列表就是a元素)
12、修复下载文件无后缀问题
13、新增高级过滤功能
14、添加鼠标和键盘的模拟操作
15、增大滚动页数