Meta Robots 生成
生成页面索引控制 meta 标签
SEO 与结构化数据
🔒 100% 本地运行 — 你的数据不会离开当前页面由 Evan 维护•最近更新:2026年9月29日
选项模式
Robots Directives
先勾选 robots 指令,直接生成 meta robots 标签;冲突说明和搜索场景可在高级模式查看。
Meta Robots Tags
Meta robots tag will appear here
🔒 浏览器内本地处理
页面阅读模式
完整说明还包括常见问题处理、操作示例、代码片段、FAQ 和相关工具,便于核对结果或排查问题。
工具说明
组合页面级 robots meta 指令,并可添加 Googlebot 专用标签。严格模式拒绝同一标签中的 index/noindex 或 follow/nofollow 冲突;自动处理时保留 noindex、nofollow。表单不抓取页面或读取已有响应头,列表中的部分指令是否有效取决于爬虫支持。
生产可用片段
生成的标签仍可能组合为更严格的要求
text
<meta name="robots" content="noindex" />
<meta name="googlebot" content="index" />
Googlebot 不会因为自己的 index 标签就忽略适用的 noindex。此工具的冲突检查只作用于单个标签内部。常见问题
noindex 能保护私密内容吗?
不能。它是提供给能抓取并遵守该指令的爬虫的索引要求,不是访问控制。私密内容需要身份认证;若爬虫需要读取公开页面上的 noindex,就不要同时阻止抓取。
Googlebot 标签会覆盖 robots 标签吗?
不要把它当作覆盖。Google 会综合适用的 robots meta 与 X-Robots-Tag,通常采用更严格的要求。工具只检查每个生成标签内部的成对冲突,不检查跨标签或服务器响应头的组合。
自动处理冲突会修改什么?
同时选择 noindex 时移除 index,同时选择 nofollow 时移除 follow。它不会解决摘要、图片预览等全部指令之间的所有关系。
Google 支持这里显示的所有选项吗?
不支持。指令支持会变化,也因爬虫而异。例如 Google 已不再使用 noarchive 控制搜索缓存链接。生成标签不代表某个爬虫会执行列表中的每个指令。
继续浏览