- 可用情况
- 抢先体验。尚未全面开放,也不承诺服务级别。阅读 SEO 工具指南
- 所有权
- 检查和爬取仅针对已验证归属的域名进行。每次请求时都会重新检查证明。阅读所有权证明说明
- 爬取规则
- 爬取会遵循 robots.txt、尊重爬取延迟,并在达到页面预算后停止。阅读爬取限制
- 仅限静态 HTML
- 标签和同意状态检查会读取页面 HTML。运行时注入的标签无法被发现。查看检查范围
场景
您需要了解爬虫实际上能读取什么
- 没人记得的 noindex 或 robots.txt 规则
- 针对同一 AI 爬虫的规则相互冲突
- 未声明结构化数据的页面
工作原理
从已验证域名到修复清单
1. 验证域名
通过 DNS 记录或 Search Console 资源证明您拥有该域名。Noxtica 会在每次请求时重新检查证明。
2. 检查页面或启动爬取
管理员检查单个页面或启动有限范围爬取。爬取会遵循 robots.txt 并在后台运行。
3. 查看问题和网站检查结果
每个问题都附有严重程度和修复方法。爬取完成后,还会增加全站检查,涵盖 AI 爬虫、llms.txt、结构化数据、地址处理和营销标签。
4. 修复后重新检查
修改网站,然后重新检查页面或启动新的爬取。爬取完成后,搜索评分会更新。
已验证的域名会进行页面检查或网站爬取。您的团队可以查看问题、网站检查结果和评分。
流程文字说明
输入
- 您的域名已验证归您所有
- 您的公开页面页面、robots.txt、llms.txt
SEO/AEO 与营销
页面检查和有限范围爬取
输出
- 问题严重程度及修复方法
- 网站检查AI 爬虫、llms.txt、结构化数据
- 搜索评分每次爬取后更新
此图示展示的是上述流程,并非客户数据。
功能
您在 Backoffice 中可以查看的内容
技术 SEO
页面检查
单个页面的评分、HTTP 状态和问题:标题、元描述、标题层级、规范链接、可索引性、图片、结构化数据、安全标头和首字节时间。
网站爬取
对已验证主机进行有限范围爬取后发现的页面和问题;每项均标记为页面级或全站级,包括 hreflang、孤立页面和重复标题。
搜索评分
爬取页面的技术评分均值,以及按严重程度统计的问题数量;每次爬取完成后重新计算。
答案引擎就绪度
AI 爬虫访问
您的 robots.txt 如何处理为 AI 产品收集内容的爬虫:允许、阻止、部分限制、规则冲突或未提及。
llms.txt
网站是否提供 llms.txt 文件。
结构化数据
有多少爬取页面声明了 JSON-LD、使用了哪些类型,以及哪些区块无法读取。
营销与搜索工具
营销标签与同意状态
页面 HTML 中出现了哪些营销和分析标签,以及这些标签旁是否出现同意管理平台或 Google Consent Mode 默认设置。
地址检查
http 是否重定向到 https、www 与非 www 地址是否一致,以及缺失页面如何响应。
Google Search Console
为每个域名连接一个资源以证明所有权,并读取每日平均搜索排名。
技术 SEO
- 页面检查
- 网站爬取
- 搜索评分
答案引擎就绪度
- AI 爬虫访问
- llms.txt
- 结构化数据
营销与搜索工具
- 营销标签与同意状态
- 地址检查
- Google Search Console
示例
页面检查会返回什么
- 页面
- 已验证域名上的一个 URL
- 结果
- 0 到 100 的评分和问题列表
- 严重程度
- 严重、警告或提示
- 每个问题
- 问题内容及修复方法
- 所有权
- 每次请求时重新检查
- 历史记录
- 近期检查记录,含评分和时间
示例字段,并非客户数据。评分是供团队参考的信号,并非排名预测。
适用场景
适用场景
上线前
在访客发现之前,找出阻止编入索引的问题
- 检查新页面是否存在 noindex、规范链接和 robots.txt 问题。
- 爬取网站,查找孤立页面、重复标题和过长的重定向链。
- 修复页面后再次检查以确认。
AI 爬虫
查看 robots.txt 如何处理 AI 爬虫
- 查看 robots.txt 对哪些 AI 爬虫设置了允许、阻止或未提及。
- 发现针对同一爬虫的冲突规则。
- 检查网站是否提供 llms.txt,以及声明了多少结构化数据。
营销标签
了解哪些标签已加载,以及同意管理工具是否与它们同时出现
- 查看页面 HTML 中发现的营销和分析标签。
- 查看是否出现同意管理平台或 Google Consent Mode 默认设置。
- 将发现结果作为复查提示,因为运行时添加的标签无法被发现。
询问您的数据
通过 Assistant 或 MCP 读取结果
- AI Assistant 会根据已登录用户的权限读取您的 SEO 结果。
- MCP 服务器会在令牌权限范围内,为您自己的智能体提供相同的只读工具。
范围与职责
- 抢先体验:目前尚未普遍开放,不提供 SLA,范围和日期可能变更。本页面内容不构成对范围或日期的承诺。
- 检查和爬取仅针对您已验证归属的域名进行。爬取会遵循 robots.txt、限制在页面预算内,并在后台运行,因此不会覆盖所有页面。
- 结果是供团队参考的信号,并非排名预测。答案引擎就绪度检查会读取 robots.txt、llms.txt 和页面标记。它们不会衡量任何 AI 产品是否引用或提升您页面的排名;robots.txt 是向爬虫提出的请求,并非访问控制。
- 检查和抓取只读取静态 HTML,不会运行 JavaScript,因此无法看到运行时添加的内容、标签或结构化数据。Noxtica 在此不会发送电子邮件、撰写内容或运行营销活动。
监控和回放必须遵循您的告知、同意和脱敏设置,以及我们的可接受使用规则。 阅读可接受使用政策
常见问题
关于 SEO/AEO 与营销的常见问题
是否有 AEO 评分,或 AI 答案中的排名?
不能。Noxtica 会检查您的网站向答案引擎公开的内容:robots.txt 如何处理 AI 爬虫、是否存在 llms.txt,以及页面声明了多少结构化数据。它不会衡量任何 AI 产品是否引用或提升您页面的排名。
我可以检查哪些域名?
仅限您已验证归属的域名。域名上的 DNS TXT 记录、Search Console 资源或处于启用状态的中继主机名可证明所有权,Noxtica 会在每次请求时重新检查证明。
它会遵循 robots.txt 吗?
可以。抓取会遵循针对产品令牌 noxtica 的 robots.txt,并在达到页面预算后停止。管理员可以选择在每次抓取时同时获取 robots.txt 禁止访问的页面。这些页面仍会报告为已屏蔽,该选择也会记录在审计日志中。
它可以发送电子邮件或开展营销活动吗?
不会。SEO/AEO 与营销会读取您的网站并报告发现结果。它不会发送电子邮件、撰写内容或开展营销活动。
谁可以使用?
查看者可以读取结果。管理员可以运行检查和爬取,并连接 Search Console。抢先体验期间的访问权限由团队协商确定。
标签和同意状态结果会包含运行时添加的标签吗?
不能。它们会读取每个页面的静态 HTML。标签管理器或同意管理平台在运行时添加的标签不会被爬取发现。
后续步骤
先阅读指南,再咨询抢先体验
试用
在申请访问权限前,了解检查内容、角色和限制。
阅读 SEO 工具指南了解
了解 Search Console 资源如何证明所有权并提供排名数据。
连接 Search Console交流
联系团队,确认资格和范围。
咨询抢先体验
