TapCub 正式上线:统计、分析、客服一个平台免费用

免费工具 Sitemap 检查:网站地图里的网址都值得抓取吗?

sitemap 里应该只放你希望被搜索引擎收录的页面:能打开、没有跳转、允许收录、canonical 指向自己。填一个域名,工具先读 robots.txt 找到 sitemap,最多读 3 个子 sitemap,再逐个请求其中最多 100 个网址,告诉你哪些不符合这些要求。

  • 自动找到 sitemap
  • 状态码、noindex、canonical
  • 导出 CSV

检查 sitemap 里的网址

填域名(如 example.com)会先查 robots.txt;也可以直接填 sitemap 或 sitemap 索引的完整地址。点「检查 sitemap」之前,下面是标了日期的示例结果。

检查器
会发什么、发给谁。打开页面时不发任何请求,下面是标了日期的示例结果。点按钮后,域名或 sitemap 地址,以及从 sitemap 里读出的网址,会发给 TapCub 的检查服务 check.tapcub.com,由它从 Cloudflare 网络去请求这些页面(请求头带 From: tools@tapcub.com),再把状态码和本工具要用的那部分页面内容返回。检查服务只为限流记录主机名、状态码和耗时,不记路径、查询参数和页面内容,也不保存结果。找 sitemap 最多用 6 次单个请求(每个 IP 每分钟最多 10 次)。批量检查每次请求带 8 个网址。第一次可能要过一个人机验证(Cloudflare Turnstile),之后 15 分钟内不用再验证。每个 IP 每分钟最多 30 次批量请求、每天 150 次。

例如 example.com、https://example.com/sitemap.xml 或 https://example.com/sitemap_index.xml。

去重后从 sitemap 开头取。

只影响下面的表格;CSV 里是全部已检查的网址。

示例结果:构建页面时于 2026-11-17 检查。点按钮查看实时结果。

sitemap 网址数

389

已读取文件里去重后的网址。

已检查

100

没问题

100

200、允许收录、canonical 指向自己。

错误

0

不是 200,或 noindex。

警告

0

跳转、canonical 指向别处、不同主机。

汇总

  • 警告robots.txt 里没有写 sitemap。加一行「Sitemap: https://…」,各家爬虫不用手动提交也能找到。
  • 提示这是一个 sitemap 索引,包含 214 个子 sitemap,读了其中 2 个。
  • 提示还有 212 个子 sitemap 没有读。想检查哪个,直接填它的地址。
  • 提示检查 389 个网址里的前 100 个。
  • 正常已检查的 100 个网址都返回 200、允许收录、canonical 指向自己。
  • 提示已检查的网址都没有问题,选「全部已检查的网址」可以看到全部。

怎么找到 sitemap 的

步骤地址状态结果
robots.txthttps://www.woshipm.com/robots.txt200没有 Sitemap 行
sitemaphttps://www.woshipm.com/sitemap.xml200sitemap 索引:214 个 sitemap
子 sitemaphttps://www.woshipm.com/sitemap-misc.xml2001 个网址
子 sitemaphttps://www.woshipm.com/topic-sitemap.xml200388 个网址
CSV
url,status,final_url,redirects,noindex,canonical,title,findings
https://www.woshipm.com/,200,https://www.woshipm.com/,0,,https://www.woshipm.com/,人人都是产品经理 | 产品经理、产品爱好者学习交流平台,
https://www.woshipm.com/topic/2026-ai-bj,200,https://www.woshipm.com/topic/2026-ai-bj,0,,,2026 AI 产品经理大会-北京站 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/aarrr,200,https://www.woshipm.com/topic/aarrr,0,,,AARRR模型的拆解 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/ai,200,https://www.woshipm.com/topic/ai,0,,,AI 产品经理入门手册 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/ai-5,200,https://www.woshipm.com/topic/ai-5,0,,,AI+社交 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/aigc,200,https://www.woshipm.com/topic/aigc,0,,,AIGC的应用 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/ai-3,200,https://www.woshipm.com/topic/ai-3,0,,,AI产品经理需要掌握的AI技术 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/ai-6,200,https://www.woshipm.com/topic/ai-6,0,,,AI图像识别 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/ai-2,200,https://www.woshipm.com/topic/ai-2,0,,,AI应用实例分析 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/android-ios,200,https://www.woshipm.com/topic/android-ios,0,,,Android和iOS有哪些差异? | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/api,200,https://www.woshipm.com/topic/api,0,,,API接口知识小结 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/businesspm,200,https://www.woshipm.com/topic/businesspm,0,,,App 商业化实战指南专栏 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/report,200,https://www.woshipm.com/topic/report,0,,,APP年度报告的设计思路 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/ad-3,200,https://www.woshipm.com/topic/ad-3,0,,,APP广告投放指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/app-2,200,https://www.woshipm.com/topic/app-2,0,,,APP设计全方位解析 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/app,200,https://www.woshipm.com/topic/app,0,,,APP运营推广实操指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/aso,200,https://www.woshipm.com/topic/aso,0,,,ASO优化从入门到精通 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/bi,200,https://www.woshipm.com/topic/bi,0,,,BI系统概述 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/tob-3,200,https://www.woshipm.com/topic/tob-3,0,,,B端交互设计指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/to-b,200,https://www.woshipm.com/topic/to-b,0,,,B端产品经理如何了解业务全局 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/pm,200,https://www.woshipm.com/topic/pm,0,,,B端产品经理的通用工作流程 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/customers,200,https://www.woshipm.com/topic/customers,0,,,B端和G端客户调研 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/query,200,https://www.woshipm.com/topic/query,0,,,B端数据筛选查询的设计思路 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/component,200,https://www.woshipm.com/topic/component,0,,,B端组件的设计指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/crm,200,https://www.woshipm.com/topic/crm,0,,,CRM产品该如何设计和运营 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/erp,200,https://www.woshipm.com/topic/erp,0,,,ERP系统设计指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/feed,200,https://www.woshipm.com/topic/feed,0,,,feed流应该如何设计? | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/gmv,200,https://www.woshipm.com/topic/gmv,0,,,GMV破亿的经验总结 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/to-g,200,https://www.woshipm.com/topic/to-g,0,,,G端产品的入门指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/h5,200,https://www.woshipm.com/topic/h5,0,,,H5有了这些新玩法,还怕没灵感? | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/k12,200,https://www.woshipm.com/topic/k12,0,,,K12在线教育产品该如何设计和运营? | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/saas-3,200,https://www.woshipm.com/topic/saas-3,0,,,SaaS产品的商业模式和产品定价 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/saas,200,https://www.woshipm.com/topic/saas,0,,,SaaS产品该如何设计和运营? | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/saas-5,200,https://www.woshipm.com/topic/saas-5,0,,,SaaS创业路线图 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/saas-4,200,https://www.woshipm.com/topic/saas-4,0,,,SaaS平台产品架构设计 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/scrm,200,https://www.woshipm.com/topic/scrm,0,,,SCRM工具的搭建以及相关业务运用场景 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/seo,200,https://www.woshipm.com/topic/seo,0,,,SEO/SEM怎么做? | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/sop,200,https://www.woshipm.com/topic/sop,0,,,SOP创作指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/competitor-analysis,200,https://www.woshipm.com/topic/competitor-analysis,0,,,TO B产品如何做竞品分析 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/tob,200,https://www.woshipm.com/topic/tob,0,,,TO B产品应如何设计和运营? | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/tog,200,https://www.woshipm.com/topic/tog,0,,,TO G产品设计指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/visionpro,200,https://www.woshipm.com/topic/visionpro,0,,,Vision Pro的设计和交互指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/wms,200,https://www.woshipm.com/topic/wms,0,,,WMS系统设计指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/xr,200,https://www.woshipm.com/topic/xr,0,,,XR空间交互指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/structure,200,https://www.woshipm.com/topic/structure,0,,,一个好的运营体系该如何搭建? | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/project,200,https://www.woshipm.com/topic/project,0,,,一份完整的运营方案应包含哪些方面? | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/push,200,https://www.woshipm.com/topic/push,0,,,个性化推荐算法是什么,怎么做? | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/zhongtai,200,https://www.woshipm.com/topic/zhongtai,0,,,中台基础知识了解 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/ota,200,https://www.woshipm.com/topic/ota,0,,,了解OTA平台 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/llm,200,https://www.woshipm.com/topic/llm,0,,,了解大语言模型 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/platform,200,https://www.woshipm.com/topic/platform,0,,,了解货运平台 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/cross-border,200,https://www.woshipm.com/topic/cross-border,0,,,了解跨境支付的相关信息 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/marketing,200,https://www.woshipm.com/topic/marketing,0,,,事件营销应该怎么玩? | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/profit,200,https://www.woshipm.com/topic/profit,0,,,互联网产品盈利模式解读 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/insurance,200,https://www.woshipm.com/topic/insurance,0,,,互联网保险产品设计指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/medical-treatment-3,200,https://www.woshipm.com/topic/medical-treatment-3,0,,,互联网医疗行业分析和竞品分析报告 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/medical-treatment,200,https://www.woshipm.com/topic/medical-treatment,0,,,互联网医疗运营 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/ad-6,200,https://www.woshipm.com/topic/ad-6,0,,,互联网广告的思考与分析 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/index,200,https://www.woshipm.com/topic/index,0,,,互联网运营,应该分析哪些数据和指标? | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/finance,200,https://www.woshipm.com/topic/finance,0,,,互联网金融产品的一些事儿 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/risk-management,200,https://www.woshipm.com/topic/risk-management,0,,,互联网金融风控体系的设计指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/interaction-design-2,200,https://www.woshipm.com/topic/interaction-design-2,0,,,交互规范指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/interaction-design,200,https://www.woshipm.com/topic/interaction-design,0,,,交互设计文档的撰写指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/ixd,200,https://www.woshipm.com/topic/ixd,0,,,交互设计那些事 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/cpfx,200,https://www.woshipm.com/topic/cpfx,0,,,产品分析报告撰写指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/dynamic-effect,200,https://www.woshipm.com/topic/dynamic-effect,0,,,产品动效设计全方位科普指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/increase-2,200,https://www.woshipm.com/topic/increase-2,0,,,产品增长指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/price,200,https://www.woshipm.com/topic/price,0,,,产品定价的策略 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/abnormal,200,https://www.woshipm.com/topic/abnormal,0,,,产品异常场景设计指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/psychology,200,https://www.woshipm.com/topic/psychology,0,,,产品心理学 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/%e4%ba%a7%e5%93%81%e6%80%9d%e7%bb%b4%e9%82%a3%e4%ba%9b%e4%ba%8b%e5%84%bf,200,https://www.woshipm.com/topic/%e4%ba%a7%e5%93%81%e6%80%9d%e7%bb%b4%e9%82%a3%e4%ba%9b%e4%ba%8b%e5%84%bf,0,,,产品思维那些事儿 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/tuiguang,200,https://www.woshipm.com/topic/tuiguang,0,,,产品推广策略 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/search,200,https://www.woshipm.com/topic/search,0,,,产品搜索功能设计指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/newbie,200,https://www.woshipm.com/topic/newbie,0,,,产品新人入行须知 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/product-architecture,200,https://www.woshipm.com/topic/product-architecture,0,,,产品架构的设计指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/flowchart,200,https://www.woshipm.com/topic/flowchart,0,,,产品流程设计:如何绘制业务流程图? | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/test,200,https://www.woshipm.com/topic/test,0,,,产品测试实用指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/%e4%ba%a7%e5%93%81%e7%9a%84%e5%95%86%e4%b8%9a%e6%a8%a1%e5%bc%8f,200,https://www.woshipm.com/topic/%e4%ba%a7%e5%93%81%e7%9a%84%e5%95%86%e4%b8%9a%e6%a8%a1%e5%bc%8f,0,,,产品的商业模式 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/xiaoshou,200,https://www.woshipm.com/topic/xiaoshou,0,,,产品的销售策略 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/lixiang,200,https://www.woshipm.com/topic/lixiang,0,,,产品立项指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/pm-2,200,https://www.woshipm.com/topic/pm-2,0,,,产品管理流程及规范 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/excel-2,200,https://www.woshipm.com/topic/excel-2,0,,,产品经理/运营/数据分析师常用到的Excel技巧 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/resume,200,https://www.woshipm.com/topic/resume,0,,,产品经理如何写简历? | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/data-9,200,https://www.woshipm.com/topic/data-9,0,,,产品经理如何挖掘数据? | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/self,200,https://www.woshipm.com/topic/self,0,,,产品经理如何提高自身竞争力? | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/doc,200,https://www.woshipm.com/topic/doc,0,,,产品经理必备文档技能 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/js,200,https://www.woshipm.com/topic/js,0,,,产品经理必懂的技术知识 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/gt,200,https://www.woshipm.com/topic/gt,0,,,产品经理沟通那点事儿 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/career,200,https://www.woshipm.com/topic/career,0,,,产品经理的职业方向和规划 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/ms,200,https://www.woshipm.com/topic/ms,0,,,产品经理面试指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/interview-2,200,https://www.woshipm.com/topic/interview-2,0,,,产品经理面试题汇总 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/push-3,200,https://www.woshipm.com/topic/push-3,0,,,产品设计中的消息推送设计,需要注意哪些点? | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/methodology-2,200,https://www.woshipm.com/topic/methodology-2,0,,,产品设计方法论 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/standard,200,https://www.woshipm.com/topic/standard,0,,,产品设计规范专题 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/reconstitution,200,https://www.woshipm.com/topic/reconstitution,0,,,产品重构指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/xm,200,https://www.woshipm.com/topic/xm,0,,,产品项目总结 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/hrm,200,https://www.woshipm.com/topic/hrm,0,,,人力资源管理系统的设计指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/face-detection,200,https://www.woshipm.com/topic/face-detection,0,,,人脸识别的入门指南 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/cdp,200,https://www.woshipm.com/topic/cdp,0,,,什么是CDP(客户数据平台)?如何搭建CDP平台 | 专题 | 人人都是产品经理,
https://www.woshipm.com/topic/crm-2,200,https://www.woshipm.com/topic/crm-2,0,,,什么是CRM? | 专题 | 人人都是产品经理,

每个已检查的网址一行:状态、最终网址、noindex、canonical、标题和问题。

解析、打分和表格都在你的浏览器里根据返回内容算出。sitemap 的解析和问题判断都在本地完成。结果只留在这个标签页里,离开就没了。

分享这组输入:数值写在链接的 # 后面,不会发到服务器。

版本 v1.0更新于 更新记录

结果怎么看

每类问题是什么意思

sitemap 里的每个网址都等于在请求搜索引擎「来抓、来收录」。有问题,说明 sitemap 和页面本身说法不一致。

错误状态码或没有响应

404、410、5xx 或根本没有回答。Google Search Console 的网页索引报告会把这类已提交的网址标成问题。从 sitemap 删掉,或者把页面恢复。

有跳转

列出的网址会把访客带到别处。页面能用,但 sitemap 指向的不是你想被收录的那个地址,应改成最终网址。

noindex

页面说「不要收录」,sitemap 却说「请来抓」,两边自相矛盾;Google Search Console 会提示「已提交的网址带有 noindex 标记」。先想清楚要哪个结果。

canonical 指向别处

页面把另一个网址声明为主版本。canonical 对搜索引擎只是建议,sitemap 再列另一个网址会削弱它。「写法不同」指只差 http / https、www 或末尾斜杠。

结果没问题只代表已检查的网址没问题,不代表整个网站。lastmod 日期、hreflang、图片条目这里不查;要检查 XML 本身,用 sitemap 生成器的「检查」模式。

怎么用

三步

不用注册。每次读取 sitemap 并检查最多 100 个网址。

  1. 1

    填域名或 sitemap 地址

    填域名时工具会像爬虫一样先读 robots.txt。网站很大时,直接填某一个子 sitemap,只检查那一部分。

  2. 2

    点检查

    「步骤」表列出读过的每个文件和里面有什么;网址表随着每批结果返回逐步填满。

  3. 3

    修改并导出

    先处理错误,再处理跳转和 canonical。下载 CSV 交给负责生成 sitemap 的同事或插件设置的人。

怎么检查的

从 robots.txt 一路查到每个网址的

找 sitemap 的路径和搜索引擎一样,然后读取每个列出页面的开头部分。

  • 填的是域名:先读 /robots.txt 的 Sitemap: 行(最多试前两个);没有的话试 /sitemap.xml 和 /sitemap_index.xml
  • sitemap 索引:按顺序读最多 3 个子 sitemap,网址够数就停。压缩的 .xml.gz 读不了
  • 网址去重后取前 100 个(或 50 / 20 个),8 个一组用 GET 请求,最多跟随 3 次跳转
  • 每个页面读前 64 KB:状态码、最终网址、<title>、meta robots(robots、googlebot、bingbot)、X-Robots-Tag 响应头和 <link rel="canonical">
  • canonical 按最终网址解析成完整地址后,再和 sitemap 里写的网址比较(忽略 # 片段)
各类问题和级别
问题级别一般怎么改
返回 404 / 410 / 5xx错误从 sitemap 删掉,或恢复页面
noindex错误从 sitemap 删掉,或去掉 noindex
跳转到别的网址警告改成最终网址
canonical 指向别处警告改成 canonical 网址
不同主机警告放到那个主机自己的 sitemap
重复条目警告每个网址只列一次
例子

人人都是产品经理的 sitemap,2026-11-17 检查

上面的默认结果:robots.txt 里没有写 sitemap,是在 /sitemap.xml 找到的一个 sitemap 索引。

示例是怎么检查的
步骤结果
robots.txt能打开,但没有 Sitemap: 行,所以工具接着试 /sitemap.xml
sitemap.xml是一个 <sitemapindex>,包含 214 个子 sitemap;按顺序读,前两个(1 个网址 + 388 个网址)就够 100 个了
检查结果前 100 个网址全部返回 200、允许收录、canonical 指向自己;唯一的提示是 robots.txt 没有声明 sitemap

结果干净只代表这 100 个网址没问题。另外 212 个子 sitemap 没有读,可以把其中某一个的地址直接填进来检查。sitemap 每天都在变,示例保留原来的日期。

常见误区

sitemap 里为什么总混进坏网址

大多数 sitemap 是建站系统或插件自动生成的,问题通常出在设置上,而不是手误。

把 noindex 页面也列进去

标签页、站内搜索结果页、提交成功页设了 noindex,却还留在插件生成的 sitemap 里。在插件设置里把它们排除。

改版后还是旧网址

sitemap 仍然列着改版前的地址,现在都在跳转。要从新站重新生成,不要沿用旧的导出文件。

http 或 www 对不上

sitemap 写 http://example.com,网站实际是 https://www.example.com,每个条目都变成一次跳转,canonical 也对不上。

/sitemap.xml 返回的是网页

单页应用常常对所有路径都返回首页。爬虫拿到的是 HTML 而不是 XML,什么也读不到。

常见问题

Sitemap 检查常见问题

还有其他问题?

直接和 TapCub 团队聊聊——工作日通常几小时内回复。

怎么检查 sitemap 有没有错误?

在上面填域名,点「检查 sitemap」。工具会通过 robots.txt 找到 sitemap,读取后请求其中最多 100 个网址,列出所有不是 200、有跳转、带 noindex 或 canonical 指向别处的网址。

怎么找到一个网站的 sitemap?

先看 /robots.txt 里有没有 Sitemap: 行,爬虫就是在这里找的。常见的默认位置是 /sitemap.xml 和 /sitemap_index.xml,本工具按这个顺序都会试。

有跳转的网址能放进 sitemap 吗?

不建议。sitemap 应该列你希望被收录的规范网址。会跳转的条目照样会被抓取,但它指向的是一个你并不希望被收录的地址。

sitemap 里有 noindex 页面要紧吗?

两边信号相反:sitemap 请求抓取,页面要求不收录。除非是临时列出来、想让搜索引擎尽快看到 noindex,否则从 sitemap 删掉。

几千个网址的 sitemap 能一次查完吗?

一次只查开头的最多 100 个。大网站可以把子 sitemap 一个个填进来查,或者把指定网址贴到批量网址状态检查里。

百度和 Google 对 sitemap 的要求一样吗?

基本格式相同,都用 sitemaps.org 协议,单个文件最多 50,000 个网址。百度要求单个文件不超过 10 MB,并且在搜索资源平台提交,不读取 sitemap 索引文件;Google 接受索引文件,也会读 robots.txt 里的 Sitemap 行。

为什么这里显示 403,浏览器里却能打开?

对方网站拦截了自动请求或云服务器网段。搜索引擎的爬虫可能按 IP 被放行,所以这里的 403 是一个需要核实的提示,不等于页面有问题。

更新记录

更新记录

这个工具的新功能、修复和数据更新,最新的在前。

  1. · v1.0

    首次上线首次上线。

这个工具用到的数据

  • 示例批量、Sitemap、链接与统计代码检查 — 核对于 2026-11-17,每 6 个月复核(2027-05-17 前复核)

缺功能或发现错误?告诉我们,常被提到的会排进下次更新。 全部工具更新

下一步

看爬虫怎么使用你的 sitemap

TapCub 把爬虫访问和真人分开统计,并且每天检查你的 robots.txt。

看清数据,找到增长。

每一次点击,都有数据依据。装好一行代码,1 分钟看到第一批数据。

无需信用卡 · 统计与客服都有免费版 · 统计无 Cookie