AI 爬虫访问检查
检查 robots.txt 规则、AI 爬虫访问权限、站点地图、noindex 指令、软 404 和页面臃肿问题,以识别妨碍发现的因素。
AgentGrade 是一款网页评估工具,用于评估网站对 AI 代理和答案引擎的可访问性与可用性。提交 URL 后,您将获得 0–100 分和 A–F 等级报告,涵盖可抓取性、机器理解、答案就绪度、可引用性、可信度、内容深度、时效性、面向 AI 的发现能力和性能等方面。该评估旨在说明哪些页面特征有助于或妨碍 AI 系统发现、理解并引用页面内容。AgentGrade 与传统 SEO 审核有所区别,后者主要关注搜索排名。
检查 robots.txt 规则、AI 爬虫访问权限、站点地图、noindex 指令、软 404 和页面臃肿问题,以识别妨碍发现的因素。
在不运行 JavaScript 的情况下获取页面,并检查许多 AI 爬虫可访问的 HTML 中是否包含内容、标题、元数据和结构化数据。
评估直接导语、问题式标题、列表、表格、可提取文本、常见问题和作者信息等特征,这些因素会影响内容是否适合作为答案或能否被引用。
检查 HTTPS、实体 schema 和 sameAs、关于我们与联系信息、引用、实质性内容分区、具体数据,以及可见或结构化日期等信号。
查找 llms.txt、Markdown 页面路由、MCP 卡片和代理发现信号。
自动检测页面类型,或允许用户在通用页面、内容/文章、营销/落地页和 API/应用之间进行选择。等级会根据所选类型加权;性能检查使用来自 Chrome 的真实用户 Core Web Vitals 数据。
扫描未出现在 AI 生成答案中的页面,检查爬虫规则、noindex 设置或仅由 JavaScript 渲染的内容是否可能限制访问。
评估文章的标题、导语、列表、表格和可提取内容,找出有利于答案引擎的结构优化机会。
选择合适的页面类型,根据针对该格式加权的标准评估落地页或首页,而不是套用对文章长度的预期。
在评估网站是否准备好被 AI 发现时,使用报告检查站点地图日期、llms.txt、Markdown 路由、结构化数据和页面性能等项目。
将页面 URL 粘贴到 AgentGrade 中。它会在不运行 JavaScript 的情况下获取页面,并返回分级报告卡。
分数范围为 0–100,同时以 A–F 等级表示。它汇总了与 AI 抓取、理解、回答、引用、可信度及其他信号相关的加权类别下的页面就绪度。
可以。AgentGrade 会自动检测页面类型,“评估为”选择器提供通用页面、内容/文章、营销/落地页和 API/应用选项。不同类型的权重有所不同。
它会存储提交的网站 URL 及时间戳,以了解使用情况并改进服务。其说明称不会存储报告或用户的 IP 地址。
不是。AgentGrade 关注 AI 系统能否抓取、解析和引用页面,包括页面内容是否无需 JavaScript 即可访问。这与 SEO 有交集,但关注的信号不同于蓝色链接排名审核。
流量数据仅供参考。