example.com 的检测快照
本页为一次检测的历史留存快照,数据定格于检测完成时刻。
- robots.txt 未封禁 AI 爬虫
- 缺失 Sitemap、结构化数据、llms.txt
- 1/3 家平台认识本站
优化建议
针对页面正文依赖JS导致AI爬虫抓不到的严重问题,将核心正文内容直接渲染在HTML静态源码中,避免仅通过JS加载内容。
针对缺少meta description的提醒问题,编写与页面主题匹配的150-160字的描述标签,替换原无描述状态。
针对未配置llms.txt的提醒问题,在网站根目录创建llms.txt,明确允许/禁止的AI爬虫访问路径与规则。
针对未检测到Sitemap的提醒问题,生成XML格式的站点地图并提交至搜索引擎,同时适配AI爬虫的抓取需求。
针对Kimi、智谱清言不认识该站的问题,在页面补充清晰的站点主题说明,强化AI模型对页面的识别度。
域名与基础信息
example.com 站点标题为「Example Domain」,部署于 cloudflare 服务器,经 Cloudflare 加速,解析 IP 172.66.147.243。本次检测 HTTP 200,响应 638ms,启用 br 传输压缩。HTTPS 证书由 SSL Corporation Cloudflare TLS Issuing ECC CA 3 签发,检测时剩余 67 天。域名注册于 1995-08-14,域名年龄 31 年,注册商为 RESERVED-Internet Assigned Numbers Authority,检测时距离到期还有 356 天。AI 平台认知 1/3 家,robots.txt 封禁 0/20 只 AI 爬虫。
- IP 地址
- 172.66.147.243
- 服务器类型
- cloudflare
- CDN / 网关
- Cloudflare
- 响应速度
- 638ms
- HTTPS 证书
- SSL Corporation Cloudflare TLS Issuing ECC CA 3
- 证书有效期至
- 2026-10-27(检测时剩余 67 天)
- HTTP 状态
- 200
- 传输压缩
- br 压缩
- 注册商
- RESERVED-Internet Assigned Numbers Authority
- 创建时间
- 1995-08-14(域名年龄 31 年)
- 到期时间
- 2027-08-13(剩余 356 天)
- DNS 服务器
- ELLIOTT.NS.CLOUDFLARE.COM,HERA.NS.CLOUDFLARE.COM
共 6 项检测,其中 5 项未完全通过,异常项已置顶并用左侧色条标出。
AI 爬虫普遍不执行 JavaScript,正文很可能完全抓不到
响应 Body 经压缩传输,爬虫抓取更快
页面 TDK 信息
| 项目 | 字符数 | 内容 |
|---|---|---|
| 标题 Title | 14个字符(一般不超过 80 个) | Example Domain |
| 关键词 Keywords | -- | 未配置 |
| 描述 Description | -- | 未配置 |
豆包认识example.com是一个用于示例、测试和文档用途的保留域名,本身没有实际的商业服务或特定业务内容。
调用失败,请稍后重试
多为平台网关瞬时异常,重新检测通常可恢复;该平台本次不计入 AI 认知度评分。
智谱清言不认识不了解
共检测 20 只主流 AI 爬虫:放行 20 只,封禁 0 只。规则解析自 robots.txt 原文,模拟访问以真实爬虫 UA 请求本站首页所得。
模拟访问实测
爬虫可正常抓取页面
爬虫可正常抓取页面
robots.txt 规则解析
| 状态 | 爬虫 | 运营方 | 用途 | 命中规则 |
|---|---|---|---|---|
| 放行 | GPTBot | OpenAI | 模型训练 | 无 robots.txt,默认允许 |
| 放行 | OAI-SearchBot | OpenAI | 搜索索引 | 无 robots.txt,默认允许 |
| 放行 | ChatGPT-User | OpenAI | 实时抓取 | 无 robots.txt,默认允许 |
| 放行 | ClaudeBot | Anthropic | 模型训练 | 无 robots.txt,默认允许 |
| 放行 | Claude-User | Anthropic | 实时抓取 | 无 robots.txt,默认允许 |
| 放行 | Claude-SearchBot | Anthropic | 搜索索引 | 无 robots.txt,默认允许 |
| 放行 | PerplexityBot | Perplexity | 搜索索引 | 无 robots.txt,默认允许 |
| 放行 | Perplexity-User | Perplexity | 实时抓取 | 无 robots.txt,默认允许 |
| 放行 | Bytespider | 字节跳动 | 搜索索引 | 无 robots.txt,默认允许 |
| 放行 | Baiduspider | 百度 | 搜索索引 | 无 robots.txt,默认允许 |
| 放行 | Bingbot | 微软 | 搜索索引 | 无 robots.txt,默认允许 |
| 放行 | Googlebot | 搜索索引 | 无 robots.txt,默认允许 | |
| 放行 | Google-Extended | 训练控制 | 无 robots.txt,默认允许 | |
| 放行 | Meta-ExternalAgent | Meta | 模型训练 | 无 robots.txt,默认允许 |
| 放行 | Applebot-Extended | Apple | 训练控制 | 无 robots.txt,默认允许 |
| 放行 | CCBot | Common Crawl | 训练语料 | 无 robots.txt,默认允许 |
| 放行 | Amazonbot | Amazon | 搜索索引 | 无 robots.txt,默认允许 |
| 放行 | DuckAssistBot | DuckDuckGo | 搜索索引 | 无 robots.txt,默认允许 |
| 放行 | Cohere Crawler | Cohere | 模型训练 | 无 robots.txt,默认允许 |
| 放行 | TikTokSpider | TikTok | 搜索索引 | 无 robots.txt,默认允许 |
| # | 信源域名 | 提及平台 | 平台数 |
|---|---|---|---|
| 1 | 豆包Kimi智谱清言 | 1 | |
| 2 | 豆包Kimi智谱清言 | 1 | |
| 3 | 豆包Kimi智谱清言 | 1 | |
| 4 | 豆包Kimi智谱清言 | 1 | |
| 5 | 豆包Kimi智谱清言 | 1 | |
| 6 | 豆包Kimi智谱清言 | 1 | |
| 7 | 豆包Kimi智谱清言 | 1 | |
| 8 | 豆包Kimi智谱清言 | 1 | |
| 9 | 豆包Kimi智谱清言 | 1 | |
| 10 | 豆包Kimi智谱清言 | 1 |
| # | 关键词 | 提及平台 | 平台数 | 操作 |
|---|---|---|---|---|
| 1 | example.com | 豆包Kimi智谱清言 | 2 | 实测排名 |
| 2 | example 官网 | 豆包Kimi智谱清言 | 2 | 实测排名 |
| 3 | 示例域名 | 豆包Kimi智谱清言 | 2 | 实测排名 |
| 4 | example 域名 | 豆包Kimi智谱清言 | 2 | 实测排名 |
| 5 | example domain官网 | 豆包Kimi智谱清言 | 1 | 实测排名 |
| 6 | 示例域名网站 | 豆包Kimi智谱清言 | 1 | 实测排名 |
| 7 | 官方示例站点 | 豆包Kimi智谱清言 | 1 | 实测排名 |
| 8 | example域名介绍 | 豆包Kimi智谱清言 | 1 | 实测排名 |
| 9 | example.com是什么 | 豆包Kimi智谱清言 | 1 | 实测排名 |
| 10 | 示例网站example | 豆包Kimi智谱清言 | 1 | 实测排名 |
| 11 | 官方example域名 | 豆包Kimi智谱清言 | 1 | 实测排名 |
| 12 | 测试域名example | 豆包Kimi智谱清言 | 1 | 实测排名 |
| 13 | example官网地址 | 豆包Kimi智谱清言 | 1 | 实测排名 |
| 14 | example官方网站 | 豆包Kimi智谱清言 | 1 | 实测排名 |
| 15 | 示例测试域名 | 豆包Kimi智谱清言 | 1 | 实测排名 |
| 16 | Example Domain | 豆包Kimi智谱清言 | 1 | 实测排名 |
| 17 | example 网站 | 豆包Kimi智谱清言 | 1 | 实测排名 |
| 18 | Example 首页 | 豆包Kimi智谱清言 | 1 | 实测排名 |
| 19 | 域名示例网页 | 豆包Kimi智谱清言 | 1 | 实测排名 |
| 20 | 测试网址 example | 豆包Kimi智谱清言 | 1 | 实测排名 |
共 4 项,按优先级排序:严重 1 项 · 提醒 3 项。逐项修复后重新检测,可观察综合分变化。
生成 sitemap.xml 并在 robots.txt 中声明;同时到 Bing Webmaster 提交并开启 IndexNow,加速 ChatGPT/Copilot 索引
AI 收录指南查看最新数据:example.com 的 AI 收录查询