taobao.com 的检测快照
本页为一次检测的历史留存快照,数据定格于检测完成时刻。
淘宝网 - 亚洲较大的网上交易平台,提供各类服饰、美容、家居、数码、话费/点卡充值… 数亿优质商品,同时提供担保交易(先收货后付款)等安全交易保障服务,并由商家提供退货承诺、破损补寄等消费者保障服务,让你安心享受网上购物乐趣!
- robots.txt 未封禁 AI 爬虫
- 缺失 Sitemap、结构化数据
- 2 家 AI 平台均可识别
优化建议
针对未检测到Sitemap的问题,可生成淘宝全站或核心频道的XML格式Sitemap,提交至百度、谷歌等站长平台,提升爬虫抓取效率。
针对未提供Agent接入声明文件的问题,在网站根目录创建robots.txt文件,明确允许/禁止的爬虫Agent及抓取规则,规范爬虫访问行为。
针对豆包、智谱清言认知度不足,可补充官网结构化信息,明确标注核心服务细节,让AI更精准识别平台定位。
域名与基础信息
taobao.com 站点标题为「淘宝」,部署于 Tengine 服务器,经 Tengine(阿里云系) 加速,解析 IP 59.82.44.240。本次检测 HTTP 200,响应 91ms,启用 gzip 传输压缩。HTTPS 证书由 GlobalSign nv-sa GlobalSign GCC R3 OV TLS CA 2024 签发,检测时剩余 76 天。AI 平台认知 2/2 家,robots.txt 封禁 0/20 只 AI 爬虫。
- IP 地址
- 59.82.44.240
- 服务器类型
- Tengine
- CDN / 网关
- Tengine(阿里云系)
- 响应速度
- 91ms
- HTTPS 证书
- GlobalSign nv-sa GlobalSign GCC R3 OV TLS CA 2024
- 证书有效期至
- 2026-11-22(检测时剩余 76 天)
- HTTP 状态
- 200
- 传输压缩
- gzip 压缩
共 9 项检测(含 1 项参考项,不计分),其中 2 项未完全通过,异常项已置顶并用左侧色条标出。
正文在 HTML 源码中,AI 爬虫可直接读取
未设置 meta robots,默认允许索引与抓取
未发送 X-Robots-Tag 响应头,默认允许索引与抓取
响应 Body 经压缩传输,爬虫抓取更快
llms-full.txt、AGENTS.md、openapi.json、MCP 清单等新兴 Agent 协议文件;缺失不影响当前 AI 可见性,是面向 Agent 时代的加分项
页面 TDK 信息
| 项目 | 字符数 | 内容 |
|---|---|---|
| 标题 Title | 2个字符(一般不超过 80 个) | 淘宝 |
| 关键词 Keywords | 114个字符(一般不超过 100 个) | 淘宝,掏宝,网上购物,C2C,在线交易,交易市场,网上交易,交易市场,网上买,网上卖,购物网站,团购,网上贸易,安全购物,电子商务,放心买,供应,买卖信息,网店,一口价,拍卖,网上开店,网络购物,打折,免费开店,网购,频道,店铺 |
| 描述 Description | 113个字符(一般不超过 200 个) | 淘宝网 - 亚洲较大的网上交易平台,提供各类服饰、美容、家居、数码、话费/点卡充值… 数亿优质商品,同时提供担保交易(先收货后付款)等安全交易保障服务,并由商家提供退货承诺、破损补寄等消费者保障服务,让你安心享受网上购物乐趣! |
- 1淘宝网本站淘宝
- 2淘宝网 _ 百科微信百科
- 3Taobao | 淘寶淘宝(Taobao Macau)
- 4淘宝网搜狗百科
- 5淘宝(中国)软件有限公司企查查
- 6Taobao-Alibaba GroupAlibaba Group
- 7淘宝网(阿里巴巴集团旗下的购物平台)-百科抖音百科
- 8淘宝网页版官网主站入口 淘宝官方页面访问路径阿里西西
- 1Taobao | 淘寶https://mo.world.taobao.com/联网检索
- 2淘宝网https://www.taobao.com/go/chn/visa_taiwan_2012/index.html联网检索
豆包认识taobao.com是阿里巴巴集团旗下的综合性网购零售平台,涵盖C2C、团购、分销、拍卖等多种电子商务模式,为消费者提供丰富的商品购物服务。
智谱清言认识淘宝网是中国领先的综合性网购零售平台,提供包括C2C、B2C等在内的多样化电子商务服务,致力于让消费者方便地购买各类商品和服务。
共检测 20 只主流 AI 爬虫:放行 20 只,封禁 0 只。规则解析自 robots.txt 原文,模拟访问以真实爬虫 UA 请求本站首页所得。
模拟访问实测
爬虫可正常抓取页面
爬虫可正常抓取页面
robots.txt 规则解析
| 状态 | 爬虫 | 运营方 | 用途 | 命中规则 |
|---|---|---|---|---|
| 放行 | GPTBot | OpenAI | 模型训练 | 跟随 User-agent: * 规则 |
| 放行 | OAI-SearchBot | OpenAI | 搜索索引 | 跟随 User-agent: * 规则 |
| 放行 | ChatGPT-User | OpenAI | 实时抓取 | 跟随 User-agent: * 规则 |
| 放行 | ClaudeBot | Anthropic | 模型训练 | 跟随 User-agent: * 规则 |
| 放行 | Claude-User | Anthropic | 实时抓取 | 跟随 User-agent: * 规则 |
| 放行 | Claude-SearchBot | Anthropic | 搜索索引 | 跟随 User-agent: * 规则 |
| 放行 | PerplexityBot | Perplexity | 搜索索引 | 跟随 User-agent: * 规则 |
| 放行 | Perplexity-User | Perplexity | 实时抓取 | 跟随 User-agent: * 规则 |
| 放行 | Bytespider | 字节跳动 | 搜索索引 | 跟随 User-agent: * 规则 |
| 放行 | Baiduspider | 百度 | 搜索索引 | 跟随 User-agent: * 规则 |
| 放行 | Bingbot | 微软 | 搜索索引 | 跟随 User-agent: * 规则 |
| 放行 | Googlebot | 搜索索引 | 跟随 User-agent: * 规则 | |
| 放行 | Google-Extended | 训练控制 | 跟随 User-agent: * 规则 | |
| 放行 | Meta-ExternalAgent | Meta | 模型训练 | 跟随 User-agent: * 规则 |
| 放行 | Applebot-Extended | Apple | 训练控制 | 跟随 User-agent: * 规则 |
| 放行 | CCBot | Common Crawl | 训练语料 | 跟随 User-agent: * 规则 |
| 放行 | Amazonbot | Amazon | 搜索索引 | 跟随 User-agent: * 规则 |
| 放行 | DuckAssistBot | DuckDuckGo | 搜索索引 | 跟随 User-agent: * 规则 |
| 放行 | Cohere Crawler | Cohere | 模型训练 | 跟随 User-agent: * 规则 |
| 放行 | TikTokSpider | TikTok | 搜索索引 | 跟随 User-agent: * 规则 |
高级检测:Agent 接入声明(0/6 已提供)面向 Agent 时代的协议文件,缺失不影响当前评分
| 状态 | 文件 / 端点 | 用途 | HTTP |
|---|---|---|---|
| 未提供 | llms-full.txt | llms.txt 的完整内容版,供 AI 直接读取全站核心内容 | 200 |
| 未提供 | AGENTS.md | Agent 行为边界与工具使用说明,编码/自动化 Agent 的接入约定 | 200 |
| 未提供 | ai-plugin.json | ChatGPT 插件清单,定义插件元数据、认证方式与 API 规范入口 | 200 |
| 未提供 | openapi.json | OpenAPI 规范文件,Agent 据此理解并调用站点 API | 200 |
| 未提供 | mcp.json | MCP 协议清单,声明站点提供的 MCP Server 能力 | 200 |
| 未提供 | MCP 端点 | MCP Server 实际端点,Agent 通过它调用站点工具 | 200 |
| # | 信源域名 | 提及平台 | 平台数 |
|---|---|---|---|
| 1 | 豆包智谱清言 | 2 | |
| 2 | 豆包智谱清言 | 2 | |
| 3 | 豆包智谱清言 | 2 | |
| 4 | 豆包智谱清言 | 2 | |
| 5 | 豆包智谱清言 | 2 | |
| 6 | 豆包智谱清言 | 1 | |
| 7 | 豆包智谱清言 | 1 | |
| 8 | 豆包智谱清言 | 1 | |
| 9 | 豆包智谱清言 | 1 | |
| 10 | 豆包智谱清言 | 1 |
| # | 关键词 | 提及平台 | 平台数 | 操作 |
|---|---|---|---|---|
| 1 | 淘宝 | 豆包智谱清言 | 2 | 实测排名 |
| 2 | 淘宝网 | 豆包智谱清言 | 2 | 实测排名 |
| 3 | 淘宝官网 | 豆包智谱清言 | 2 | 实测排名 |
| 4 | 淘宝购物平台 | 豆包智谱清言 | 1 | 实测排名 |
| 5 | 亚洲网上交易平台 | 豆包智谱清言 | 1 | 实测排名 |
| 6 | 淘宝担保交易 | 豆包智谱清言 | 1 | 实测排名 |
| 7 | 淘宝退货承诺服务 | 豆包智谱清言 | 1 | 实测排名 |
| 8 | 淘宝数码服饰家居 | 豆包智谱清言 | 1 | 实测排名 |
| 9 | 淘宝充值平台 | 豆包智谱清言 | 1 | 实测排名 |
| 10 | 淘宝先收货后付款 | 豆包智谱清言 | 1 | 实测排名 |
| 11 | 淘宝消费者保障服务 | 豆包智谱清言 | 1 | 实测排名 |
| 12 | 淘宝正品购物平台 | 豆包智谱清言 | 1 | 实测排名 |
| 13 | 淘宝首页 | 豆包智谱清言 | 1 | 实测排名 |
| 14 | 网上购物 | 豆包智谱清言 | 1 | 实测排名 |
| 15 | 网上商城 | 豆包智谱清言 | 1 | 实测排名 |
| 16 | 淘宝购物 | 豆包智谱清言 | 1 | 实测排名 |
| 17 | 天猫淘宝 | 豆包智谱清言 | 1 | 实测排名 |
| 18 | 阿里巴巴淘宝 | 豆包智谱清言 | 1 | 实测排名 |
| 19 | 淘宝APP下载 | 豆包智谱清言 | 1 | 实测排名 |
| 20 | 淘宝购物网站 | 豆包智谱清言 | 1 | 实测排名 |
共 2 项,按优先级排序:严重 0 项 · 提醒 2 项。逐项修复后重新检测,可观察综合分变化。
生成 sitemap.xml 并在 robots.txt 中声明;同时到 Bing Webmaster 提交并开启 IndexNow,加速 ChatGPT/Copilot 索引
AI 收录指南在 llms.txt 之外,可补充 AGENTS.md、openapi.json 或 /.well-known/mcp.json,让 AI Agent 更好地理解与调用站点能力(不影响当前可见性评分)
llms.txt 生成查看最新数据:taobao.com 的 AI 收录查询