免费 SEO 爬虫:免费能得到什么
不花一分钱也能好好诊断一个小网站。下面列出各工具官方文档中的免费 SEO 爬虫选项、付费套餐通常多了什么,以及如何用好较小的 URL 上限。
免费 SEO 爬虫能做什么
免费 SEO 爬虫做的基本工作和付费爬虫一样。它从一个 URL 开始,沿着链接抓取,记录每个页面的状态码、title、canonical、robots 指令和链接。对于几百个页面的网站,这就是一次真正的技术诊断。
免费套餐的区别主要在于规模和附加功能:一次抓取能容纳多少 URL、能否保存、是否渲染 JavaScript。检查项往往和付费套餐运行的相同。所以问题不在于免费工具够不够好,而在于它对眼前这个网站来说够不够大。
免费 SEO 爬虫有哪些选择
以下是各公司在自己的文档中描述的免费版、免费套餐和试用。我们的对比页面为每一行都附上了来源链接。
| 工具 | 免费规模 | 时间限制 | 运行平台 |
|---|---|---|---|
| Screaming Frog SEO Spider | 每次抓取 500 个 URL | 无 | |
| Screaming Frog Log File Analyser | 1,000 条日志事件,1 个项目 | 无 | |
| Neova | 每次抓取 1,000 个 URL | 无 | |
| Semrush Site Audit | 每次诊断 100 个页面 | 无 | |
| Ahrefs Free | 经您验证的网站 | 无 | |
| Sitebulb Pro | 完整套餐 | 14 天 | |
| JetOctopus | 演示后试用 | 7 天 | |
| Lumar | Agentic Readiness Scanner | 无 |
详情取自各工具自己的页面,读取于 2026年11月11日。每个工具都有各自的长处:Screaming Frog 的免费版无需注册或提供邮箱,Semrush 的免费套餐还在其主要工具中每天提供 10 份报告,Sitebulb 的试用无需绑卡。套餐会变化,做决定前请查看厂商的页面。
付费套餐通常多了什么
免费套餐是产品的缩小版,而不是残缺版。在各种工具中,付费版通常扩展的是这些:
- 每次抓取的 URL 数。最大的区别:免费的是几百或几千个,付费的是几十万甚至几百万个。
- 保存和对比抓取。把上个月的抓取和今天的放在一起,就能看出一次发布改变了什么。
- 计划任务和警报。每周自动运行的抓取,出问题时通知您。
- 额外数据。服务器日志、Core Web Vitals 历史、外链、竞争对手。
- 交付。带品牌的 PDF、开发工单、团队席位、邮件支持。
Neova 各套餐对比
| 免费 | Lite | Desktop | |
|---|---|---|---|
| 每次抓取的 URL 数 | 1,000 | 10,000 | 最多 500 万 |
| 资源 | 3 | 10 | 无限制 |
| 同时进行的抓取 | 1 | 1 | 2 台,最多 4 台 |
| 694 项检查 | ✓ | ✓ | ✓ |
| JavaScript 渲染 | ✓ | ✓ | ✓ |
| Search Console 和 GA4 | ✓ | ✓ | ✓ |
| 服务器日志 | – | ✓ | ✓ |
| Core Web Vitals 快照 | – | ✓ | ✓ |
| 计划抓取和警报 | – | – | ✓ |
| 工单和品牌 PDF | – | – | ✓ |
免费套餐没有截止日期,Desktop 可免费试用 14 天,无需绑卡。Desktop 的 500 万取决于您的电脑。三个套餐都支持
免费套餐还是免费试用
| 免费套餐 | 免费试用 | |
|---|---|---|
| 何时结束 | 永不 | 规定天数后 |
| 大小 | 有上限 | 完整或接近完整 |
| 最适合 | 小网站、学习 | 在大网站上做真实测试 |
| 准备工作 | 确认上限够用 | 第一天就准备好网站和问题 |
有的工具提供其中一种,有的两种都有。Neova 两种都有:免费套餐永久免费,Desktop 试用在应用内的「设置」>「套餐与许可证」中开始。
如何选择免费 SEO 爬虫
- 先数一数 URL,再预期会更多。在我们自己的网站 seoprocheck.com 上,XML 站点地图列出了 1,835 个 URL。2026年10月17日的一次 Neova 完整抓取获取了 10,222 个 URL,另有 2,727 个经链接到达的 URL 不在任何站点地图中。图片、脚本、重定向和参数都会累加。
- 查看网站是怎么搭建的。React、Vue 或 Angular 网站可能需要 JavaScript 渲染。JavaScript SEO 爬虫指南介绍了如何判断。
- 决定数据放在哪里。桌面爬虫把抓取数据保存在您的电脑上。云端工具把数据保存在您的账户中,可能要求您验证网站。
- 看看您的电脑。如果您用 Mac 工作,Mac 版 SEO 爬虫指南介绍了可选方案。
- 读一两条结果。好的标记会说明何时触发、为何重要以及如何修复。
- 在您熟悉的网站上试用。您已经知道它的问题在哪里。
用好较小的 URL 上限
500 或 1,000 个 URL 的上限比听起来更够用,只要花在对的页面上。
| 做法 | 节省的部分 | 示例 |
|---|---|---|
| 一次一个目录 | 网站的其余部分 | 本周抓 /blog/ |
| 按模板抽样 | 重复的页面 | 5,000 个商品中抽 50 个 |
| 列表模式 | 关键页面之外的一切 | 点击量最高的 200 个页面 |
| 排除抓取陷阱 | 无穷无尽的 URL | ?sort=、/calendar/ |
| 排除资源文件 | 图片、脚本、样式 | 只抓页面 |
我们自己的完整抓取说明了最后一行为什么重要:在 seoprocheck.com 上抓取的 10,222 个 URL 中,只有 4,561 个是返回 200 的 HTML 页面。如何抓取网站指南讲解了抓取范围和排除规则。
免费抓取通常最先发现什么
在小网站上,第一次抓取往往会发现同样几类问题。以下 Neova 检查项都包含在免费套餐中:
- 内部 URL 返回 4xx、5xx 或无响应
- 内部 URL 处于重定向链中
- 可索引 URL 不在任何 XML 站点地图中
- title 或 H1 带有软 404 用语
- meta description 超过 155 个字符
- 关键 HTML 页面限制摘要或屏蔽 AI 搜索爬虫
至于如何处理它们,SEO ProCheck 有10 个常见的技术 SEO 错误和适用于任何网站的 15 个 SEO 速效改进。开始使用:下载 Neova,选择「抓取」,然后「新建抓取」,输入网址并点击「开始抓取」。您的第一次抓取展示了每个界面。
何时升级到免费套餐以外
只要免费套餐够用,就继续用。以下迹象说明它不够用了:
- 抓取在到达您关心的页面之前就达到上限停止了。
- 您需要每周自动运行的抓取,出问题时发出警报。
- 您需要把服务器日志、Core Web Vitals 历史或竞争对手放在抓取旁边。
- 您要把结果交给开发人员或客户,需要工单或带品牌的报告。
如果您只是偶尔诊断一个小网站,可能永远不需要更多。如果您为客户监控网站,就会需要。SEO ProCheck 的SEO 诊断常见问题介绍了多久诊断一次以及报告什么。
常见问题
有免费的 SEO 爬虫吗?
有,而且有好几个。Screaming Frog 的 SEO Spider 有免费版,每次抓取最多 500 个 URL;Neova 有免费套餐,每次抓取最多 1,000 个 URL,所有检查项都可用;Semrush 的免费套餐包含 Site Audit,每次诊断最多 100 个页面。
Screaming Frog 免费吗?
SEO Spider 有免费版,最多抓取 500 个 URL,无需注册。付费许可证增加了 JavaScript 渲染、保存抓取、自定义提取等功能。最新详情请看 Screaming Frog 自己的页面。
最好的免费 SEO Spider 是哪个?
上限适合您的网站、结果能让您据此行动的那个。数一数 URL,确认网站是否需要 JavaScript 渲染,再在您熟悉的网站上试用两个工具。
免费 SEO 爬虫能渲染 JavaScript 吗?
有些可以。Neova 的免费套餐会在 Chrome 中渲染页面,并与原始 HTML 对比。其他工具在付费套餐中提供渲染;对比页面展示了各工具的处理方式。
Neova 在 Mac 上免费吗?
是的。免费套餐可在 Mac(Apple 芯片)、Windows 和 Linux 上运行,每次抓取 1,000 个 URL,所有检查项都可用,没有时间限制。下载 Neova 即可开始。