example.com 的检测快照
本页为一次检测的历史留存快照,数据定格于检测完成时刻。
- robots.txt 未封禁 AI 爬虫
- 缺失 Sitemap、结构化数据、llms.txt
- 2 家 AI 平台均可识别
优化建议
针对严重问题页面正文依赖JS导致AI爬虫抓不到内容,可将核心正文内容直接渲染在HTML静态结构中,避免仅靠JS加载。
针对提醒缺少meta description,在页面head标签内添加<meta name="description" content="Example Domain官方示例站点介绍" />补全描述。
针对提醒未配置llms.txt,在网站根目录创建llms.txt,明确告知AI爬虫可抓取的页面范围与规则。
针对提醒未检测到Sitemap,生成XML格式站点地图并上传至根目录,同时提交至搜索引擎平台。
域名与基础信息
example.com 站点标题为「Example Domain」,部署于 cloudflare 服务器,经 Cloudflare 加速,解析 IP 104.20.23.154。本次检测 HTTP 200,响应 1076ms,启用 br 传输压缩。HTTPS 证书由 SSL Corporation Cloudflare TLS Issuing ECC CA 3 签发,检测时剩余 51 天。AI 平台认知 2/2 家,robots.txt 封禁 0/20 只 AI 爬虫。
- IP 地址
- 104.20.23.154
- 服务器类型
- cloudflare
- CDN / 网关
- Cloudflare
- 响应速度
- 1076ms
- HTTPS 证书
- SSL Corporation Cloudflare TLS Issuing ECC CA 3
- 证书有效期至
- 2026-10-27(检测时剩余 51 天)
- HTTP 状态
- 200
- 传输压缩
- br 压缩
共 6 项检测,其中 5 项未完全通过,异常项已置顶并用左侧色条标出。
AI 爬虫普遍不执行 JavaScript,正文很可能完全抓不到
响应 Body 经压缩传输,爬虫抓取更快
页面 TDK 信息
| 项目 | 字符数 | 内容 |
|---|---|---|
| 标题 Title | 14个字符(一般不超过 80 个) | Example Domain |
| 关键词 Keywords | -- | 未配置 |
| 描述 Description | -- | 未配置 |
- 1Whois example.comWhois.com
- 2example.com - WikidataWikidata
- 3example.com_whois查询_域名查询阿里云
- 4example邮箱是哪个公司的php.cn
- 5Example values · Cloudflare Style GuideCloudflare
- 6example邮箱是什么邮箱php.cn
- 7example.com域名意外流量的技术解析与启示CSDN博客
- 8微软错误配置将 example.com 流量重路由到日本公司域名搜狐
豆包认识example.com是IANA官方保留的示例域名,专用于技术文档、教程和表单演示中展示域名、邮箱等格式的占位符,并非真实可使用的商业网站。
智谱清言认识example.com 是一个由互联网号码分配局(IANA)保留的域名,专门用于技术文档和教程中作为示例,并非供普通用户实际访问或注册的真实网站。
共检测 20 只主流 AI 爬虫:放行 20 只,封禁 0 只。规则解析自 robots.txt 原文,模拟访问以真实爬虫 UA 请求本站首页所得。
模拟访问实测
爬虫可正常抓取页面
爬虫可正常抓取页面
robots.txt 规则解析
| 状态 | 爬虫 | 运营方 | 用途 | 命中规则 |
|---|---|---|---|---|
| 放行 | GPTBot | OpenAI | 模型训练 | 无 robots.txt,默认允许 |
| 放行 | OAI-SearchBot | OpenAI | 搜索索引 | 无 robots.txt,默认允许 |
| 放行 | ChatGPT-User | OpenAI | 实时抓取 | 无 robots.txt,默认允许 |
| 放行 | ClaudeBot | Anthropic | 模型训练 | 无 robots.txt,默认允许 |
| 放行 | Claude-User | Anthropic | 实时抓取 | 无 robots.txt,默认允许 |
| 放行 | Claude-SearchBot | Anthropic | 搜索索引 | 无 robots.txt,默认允许 |
| 放行 | PerplexityBot | Perplexity | 搜索索引 | 无 robots.txt,默认允许 |
| 放行 | Perplexity-User | Perplexity | 实时抓取 | 无 robots.txt,默认允许 |
| 放行 | Bytespider | 字节跳动 | 搜索索引 | 无 robots.txt,默认允许 |
| 放行 | Baiduspider | 百度 | 搜索索引 | 无 robots.txt,默认允许 |
| 放行 | Bingbot | 微软 | 搜索索引 | 无 robots.txt,默认允许 |
| 放行 | Googlebot | 搜索索引 | 无 robots.txt,默认允许 | |
| 放行 | Google-Extended | 训练控制 | 无 robots.txt,默认允许 | |
| 放行 | Meta-ExternalAgent | Meta | 模型训练 | 无 robots.txt,默认允许 |
| 放行 | Applebot-Extended | Apple | 训练控制 | 无 robots.txt,默认允许 |
| 放行 | CCBot | Common Crawl | 训练语料 | 无 robots.txt,默认允许 |
| 放行 | Amazonbot | Amazon | 搜索索引 | 无 robots.txt,默认允许 |
| 放行 | DuckAssistBot | DuckDuckGo | 搜索索引 | 无 robots.txt,默认允许 |
| 放行 | Cohere Crawler | Cohere | 模型训练 | 无 robots.txt,默认允许 |
| 放行 | TikTokSpider | TikTok | 搜索索引 | 无 robots.txt,默认允许 |
| # | 信源域名 | 提及平台 | 平台数 |
|---|---|---|---|
| 1 | 豆包智谱清言 | 2 | |
| 2 | 豆包智谱清言 | 1 | |
| 3 | 豆包智谱清言 | 1 | |
| 4 | 豆包智谱清言 | 1 | |
| 5 | 豆包智谱清言 | 1 | |
| 6 | 豆包智谱清言 | 1 | |
| 7 | 豆包智谱清言 | 1 | |
| 8 | 豆包智谱清言 | 1 | |
| 9 | 豆包智谱清言 | 1 | |
| 10 | 豆包智谱清言 | 1 |
| # | 关键词 | 提及平台 | 平台数 | 操作 |
|---|---|---|---|---|
| 1 | example.com | 豆包智谱清言 | 2 | 实测排名 |
| 2 | 示例域名 | 豆包智谱清言 | 2 | 实测排名 |
| 3 | Example Domain官网 | 豆包智谱清言 | 1 | 实测排名 |
| 4 | 测试域名网站 | 豆包智谱清言 | 1 | 实测排名 |
| 5 | 官方示例站点 | 豆包智谱清言 | 1 | 实测排名 |
| 6 | example域名 | 豆包智谱清言 | 1 | 实测排名 |
| 7 | 域名示例网站 | 豆包智谱清言 | 1 | 实测排名 |
| 8 | 测试用example网站 | 豆包智谱清言 | 1 | 实测排名 |
| 9 | 示例域名首页 | 豆包智谱清言 | 1 | 实测排名 |
| 10 | example官方网站 | 豆包智谱清言 | 1 | 实测排名 |
| 11 | example domain | 豆包智谱清言 | 1 | 实测排名 |
| 12 | Example Domain | 豆包智谱清言 | 1 | 实测排名 |
| 13 | example 官网 | 豆包智谱清言 | 1 | 实测排名 |
| 14 | 示例网页 | 豆包智谱清言 | 1 | 实测排名 |
| 15 | 测试域名 | 豆包智谱清言 | 1 | 实测排名 |
| 16 | example 首页 | 豆包智谱清言 | 1 | 实测排名 |
| 17 | example.com 打开 | 豆包智谱清言 | 1 | 实测排名 |
| 18 | example 域名示例 | 豆包智谱清言 | 1 | 实测排名 |
| 19 | 默认网页 | 豆包智谱清言 | 1 | 实测排名 |
共 4 项,按优先级排序:严重 1 项 · 提醒 3 项。逐项修复后重新检测,可观察综合分变化。
生成 sitemap.xml 并在 robots.txt 中声明;同时到 Bing Webmaster 提交并开启 IndexNow,加速 ChatGPT/Copilot 索引
AI 收录指南查看最新数据:example.com 的 AI 收录查询