DRKSpiderJava

Xenus Link Sleuth 可检查网站中的失效链接。链接验证功能适用于“普通”链接、图片、框架、插件、背景、本地图像映射、样式表、脚本和 Java 小程序。

如果您需要的不仅仅是网站链接检查功能——例如符合标准协议的XML站点地图、HTML有效性，以及页面标题、标题标签、元描述和关键词等基本SEO检查——请尝试使用Scrutiny。

TechSEO360 基本上可对大型网站进行抓取，收集并展示您所需的几乎所有技术SEO相关信息，并能创建各种类型的网站地图，包括包含 hreflang 信息的 XML、图片、视频以及 HTML/CSS/JavaScript 网站地图。

Audisto爬虫是一款专注于SEO的网站爬取工具，可自动检测并分析网站的所有URL，并指出优化潜力。

LinkChecker 是一款免费的、采用 GPL 许可证的网站验证工具。它可检查网页文档或整个网站中的链接，用于检测网站和 HTML 文档中的失效链接。

如果你维护过网站一段时间，就会知道链接会很快变得失效。除非你喜欢逐一点击网站上的每个链接再按回退按钮，否则你需要使用像Integrity这样的网站爬虫工具。

A1网站分析器可抓取网站并收集数据，用于发现站点及SEO问题。通过筛选结果，查看哪些URL被robots.txt阻止，哪些设置为noindex、nofollow，哪些规范标签指向自身或其它页面，以及响应代码等信息。

Meta Forensics 是一款网站架构、内部链接和SEO分析工具，可帮助您发现网站中隐藏的问题。