MROB

Meta Robots 生成

生成页面索引控制 meta 标签

SEO 与结构化数据
🔒 100% 本地运行 — 你的数据不会离开当前页面
由 Evan 维护•最近更新:2026年9月29日
选项模式
Robots Directives

先勾选 robots 指令,直接生成 meta robots 标签;冲突说明和搜索场景可在高级模式查看。

Meta Robots Tags
Meta robots tag will appear here
🔒 浏览器内本地处理
页面阅读模式

完整说明还包括常见问题处理、操作示例、代码片段、FAQ 和相关工具,便于核对结果或排查问题。

工具说明

组合页面级 robots meta 指令,并可添加 Googlebot 专用标签。严格模式拒绝同一标签中的 index/noindex 或 follow/nofollow 冲突;自动处理时保留 noindex、nofollow。表单不抓取页面或读取已有响应头,列表中的部分指令是否有效取决于爬虫支持。

生产可用片段

生成的标签仍可能组合为更严格的要求

text

<meta name="robots" content="noindex" />
<meta name="googlebot" content="index" />

Googlebot 不会因为自己的 index 标签就忽略适用的 noindex。此工具的冲突检查只作用于单个标签内部。

常见问题

noindex 能保护私密内容吗?

不能。它是提供给能抓取并遵守该指令的爬虫的索引要求,不是访问控制。私密内容需要身份认证;若爬虫需要读取公开页面上的 noindex,就不要同时阻止抓取。

Googlebot 标签会覆盖 robots 标签吗?

不要把它当作覆盖。Google 会综合适用的 robots meta 与 X-Robots-Tag,通常采用更严格的要求。工具只检查每个生成标签内部的成对冲突,不检查跨标签或服务器响应头的组合。

自动处理冲突会修改什么?

同时选择 noindex 时移除 index,同时选择 nofollow 时移除 follow。它不会解决摘要、图片预览等全部指令之间的所有关系。

Google 支持这里显示的所有选项吗?

不支持。指令支持会变化,也因爬虫而异。例如 Google 已不再使用 noarchive 控制搜索缓存链接。生成标签不代表某个爬虫会执行列表中的每个指令。

继续浏览