网络软件v10.2.12026-10-21 15:59
说明:此页面为Windows软件,不适配移动端设备。
八爪鱼采集器是一款非常实用的网络工具,以数据抓取为核心,支持全网全渠道数据采集,可采集网站覆盖新闻、社交媒体、电商、房产、招投标、监管局等多种网站类型,支持文本、图片、文件内容获取,帮助大家降低数据获取门槛与成本。可广泛应用于各类场景:产业研究、市场研究、舆情监测、社交聆听、客户之声、高校科研实训等。
1.操作简单,图形操作完全可视化,无需专业IT人员,任何能用电脑上网的人都可以轻松掌握。
2.收集任务自动分配给云中的多个服务器同时执行,提高了收集效率,能够在短时间内获取数千条信息。
3.模拟人类的操作思维方式,可以登录、输入数据、点击链接、按钮等,也可以针对不同情况采用不同的采集流程。
1.模板收集模式内置了超过一百个主流网站数据源,如京东、天猫和大众点评等热门收集网站。只需根据模板设置参数,您就可以快速获取网站公共数据。
2.可以根据不同的网站提供多种网页收集策略和支持资源,具有可定制的配置、组合应用和自动化处理。这有助于在整个收集过程中实现数据完整性和稳定性。
3.云采集由5000多台云服务器支持,全天候不间断运行,无需人员值守即可实现定时采集,灵活适应业务场景,帮助您提高采集效率,确保数据及时性。
1.根据不同用户的收集需求,可以提供自动生成网络爬虫的自定义模式,可以批量准确识别各种网页元素,以及页面翻转、下拉ajax、页面滚动和条件判断等多种功能,支持收集具有不同网页结构的复杂网站,满足各种收集应用场景。
2.只需点击设置的几个简单步骤,您就可以实现对收集任务的定时控制。无论是设置单次收款、预设某一天的收款,还是每周/每月的收款,您都可以同时自由设置多个任务,并根据需要选择多种时间组合灵活调整收款任务。
3.内置强大的数据格式化引擎,支持字符串替换、正则表达式替换或匹配、删除空格、添加前缀或后缀、日期和时间格式化、HTML转码等多种功能。收集过程完全自动化,无需人工干预即可获得所需的格式化数据。
【采集模板】是由八爪鱼官方提供的、做好的采集模板,目前已有200+采集模板,涵盖主流网站的采集场景。模板数还在不断增加。
【使用模板采集数据】时,只需输入几个参数(网址、关键词、页数等),就能在几分钟内快速获取到目标网站数据。(类似PPT模板,只需修改关键信息就能直接使用,无需自己从头配置。)
1、如何找到所需的【采集模板】
① 首页【输入框】
在客户端首页【输入框】中,输入目标网站名称,八爪鱼自动寻找相关的采集模板。将鼠标移到需要的模板上并单击,进入模板详情页面。
注意,请确保输入的网站名称正确,否则可能无法查找到相关模板。
② 首页【热门采集模板】
点击【热门采集模板】中的模板,或者【更多>>】,进入采集模板展示页面。可通过【模板类型】、【搜索模板】多种方法,寻找目标模板。
③ 没有所需的模板
如果没有找到想要的模板,请进入模板展示页面后,点击右上角【我想要新模板】,提交新模板制作需求。
官方会评估需求,排期制作新的模板。
2、【采集模板】如何使用
Step1:进入【模板详情页】后,仔细阅读【模板介绍】、【采集字段预览】、【采集参数预览】、【示例数据】,确认此模板采的数据符合需求。
注意:模板中的字段是固定的,无法自行增加字段。如果想要增加模板中的字段,请联系官方客服。
Step2:确定模板符合需求以后,点击【立即使用】,自行【配置参数】。常见的参数有关键词、翻页次数、URL等。
请认真查看【模板介绍】中的使用方法说明和参数说明,输入格式正确的参数,否则将影响模板的使用。
Step3:然后点击【保存并启动】,选择启动【本地采集】。八爪鱼自动启动1个采集任务并采集数据。
Step4:数据采集完成以后,可以需要的格式导出。这里以导出为【Excel】为例。数据示例:
通过【采集模板】创建并保存的任务,会放在【我的任务】中。在【我的任务】界面,可以对任务进行多种操作并查看任务采集到的历史数据。在 客户端界面介绍 中有详细说明。
3、【采集模板】是否收费
【采集模板】大部分是免费的,少部分是收费的。
【采集模板】收费详情【模板详情页】有详细说明,使用前请仔细阅读。如有疑问请咨询客服。
现在,我们已经学会【使用模板采集数据】了。快选择合适的模板采集数据吧!
v10.2.1版本
本地采集支持断点续采:停止后重新启动,可自动接续上次进度,无需从头采集。
新增 AI 助手:通过自然语言即可修正 XPath、增删字段、格式化字段数据及配置正则匹配,让采集配置更简单。