Screaming Frog SEO Spider

软件介绍

Screaming Frog SEO Spider（中文常称「尖叫青蛙」）是 Screaming Frog 公司推出的网站爬虫，用于技术 SEO 审查。输入网站域名后，它会像搜索引擎蜘蛛一样抓取页面，并整理出每个 URL 的状态和关键元素。

核心功能

• 链接检查：发现死链、服务器错误、重定向链和重定向循环。
• 页面元素分析：检查页面标题、描述和标题标签（H1、H2 等）。
• 重复内容：识别完全重复和近似重复的内容。
• 抓取规则审查：查看 robots.txt、meta robots 和 canonical 设置。
• 自定义提取：可用 XPath、CSS 选择器或正则表达式提取页面数据。
• XML 站点地图：生成站点地图。
• 站点结构：以可视化方式展示网站架构。
• 集成与渲染：可连接 Google Analytics、Search Console 和 PageSpeed Insights，并渲染 Angular、React、Vue.js 等依赖 JavaScript 的站点。
• 其他：支持定时抓取、对比不同抓取结果，以及无障碍（WCAG）和结构化数据检查。

支持平台与系统要求

支持 Windows、macOS 和 Linux（Ubuntu、Fedora）。官网 FAQ 说明需要 64 位系统，自带 Java：Windows 支持 Windows 10、11 及 Server 2016、2019、2022，macOS 需要 11（Big Sur）或更高版本。官方建议抓取百万级 URL 时使用 SSD 和 16 GB 内存。

适用人群或使用场景

适合 SEO 从业者、网站运营和开发人员，用来做站点体检、迁移前后对比、排查死链和重定向问题。

版本与授权

软件可免费下载，免费版每次抓取最多 500 个 URL，且配置、保存抓取结果等高级功能受限。付费授权按年计费，到期后会退回免费版。官网各页面对年费标注不一致，请以官网购买页为准。