Robots Meta Tag 和 X-Robots-Tag 是两个常用的 HTML 标签，它们对观察机动爬虫和其他网络机器人很有启发性。这些标签可以控制您的网页如何被记录和显示。
什么是机器人元标记？
机器人元标记是一个 HTML 标签，它提供信息来查看电机爬虫和其他网络机器人几乎如何记录和显示网页。它设置在 HTML 页面的段中，可用于控制外观电机爬虫的行为。
标签包括两个性质：“标题”和“实质”。“title”质量表示指令的类型，“substance”属性表示对该指令的尊重。以下是一些可以与机器人元标记一起使用的常见启发：
- “index”：此指令允许 Look Motor 爬虫记录页面并将其显示在 Look 结果中。
- “index”：此指令告诉 Look Motor 爬虫不要填充页面，并且它不会出现在 Look 结果中。
- “follow”：此指令允许查看电机爬虫在页面上的连接之后进行连接并填充连接的页面。
- “nofollow”：此指令告诉 look motor 爬虫不要在页面上的连接之后进行，并且它们不会被索引。
- “no archive”：此指令告诉 look motors 不显示页面的缓存形式。
- “snippet”：这个指令告诉你要看电机，而不是在look中显示页面的一块内容。
要使用机器人元标记，您希望将其包含在 HTML 代码的片段中，如下所示。
机器人元标记示例
<head><meta name="robots" content="noindex, nofollow"><title>Page title</title> ....
</head>
在上面的插图中，机器人元标记用于教育外观电机爬虫不要记录页面或在页面上进行任何连接。
机器人元标签可能是一种功能强大的设备，用于控制如何查看电机列表和显示您的网页，但应谨慎使用。怀疑您最近在网站上使用了每条指令的建议。
机器人元标签的应用
机器人元标签可以连接到个人网页，以控制如何查看电机爬虫记录并显示它们的外观。以下是机器人元标记的几个常见使用案例：
- 阻止外观电机对页面进行排序：如果您的位置上有不需要由外观引擎记录的跑步者，您将使用机器人元标记中的“无列表”指令。通常通常常用于包含相同内容的页面，例如适合打印的页面或具有参数化 URL 的页面。
- 控制将哪些网页编入索引：默认情况下，look motors 将努力填充您网站上的所有页面。在任何情况下，您都需要从订购中排除某些页面，例如质量低下或过时的页面。您将利用机器人元标记来指示哪些页面应该收集，哪些不应该收集。
- 防止外观电机在加入后采取：如果您网站的一些页面不需要外观电机来从它们加入后，请在机器人元标记中使用“no take after”命令。它们通常用于连接到外部网站的页面或计算用户生成的物质。
掩盖特定化合物不被看到。在机器人元标记中使用“nosnippet”命令，以防您的网站具有您不需要显示的内容，并且通常连接到具有敏感或私人数据的页面。
重要的是要记住，应谨慎使用机器人元标签，因为不光彩的使用会对您的网站的可见电机排名产生不利影响。最近某个时候，将机器人元标签添加到您的网站中，您应该在没有特别建议的情况下，聘请 SEO 专家或暗示查看电机文档。
什么是X-Robot Tag？
X-Robots-Tag 是一个 HTTP 反应标头，允许网站所有者将详细信息传达给滑动其页面的 Web 机器人。它与机器人元标记相当，但作为 HTTP 标头发送，而不是包含在页面的 HTML 代码中。
X-Robots-Tag 标头可以控制如何查看电机和其他网络机器人与网站上的个人页面或记录进行交互。它提供了比机器人元标记更精细的控制，并可用于提供额外的信息。
X-Robots-Tag 标头可用于为 Web 机器人设置各种启发性内容，包括：
- “index”：此指令告诉 Web 机器人不要列出页面或文件。
- “nofollow”：此指令告诉 Web 机器人不要在页面或文件上进行任何联接后进行操作。
- “no archive”：此指令告诉 Web 机器人不要显示页面或文件的缓存改编。
- “snippet”：此指令告诉网络机器人不要在外观结果中显示页面的碎片或记录内容。
- “noimageindex”：此指令告诉网络机器人不要在页面上归档图片。
X-Robot 标签示例
要使用 X-Robots-Tag 标头，您希望将其包含在页面或记录的 HTTP 反应中。下面是一个如何使用标题来教育网络机器人不要记录页面的图示：
X-Robots-Tag: noindex
X-Robots-Tag 标头可以是一个功能强大的设备，用于控制如何查看电机，并且其他网络机器人连接到您的站点。应谨慎使用它，并与其他 SEO 最佳磨练一起，以确保它不会对您网站的外观电机排名产生不利影响。
结论
总之，Robots Meta Tag 和 X-Robots-Tag 是用于控制如何查看电机和与您的站点相关的其他网络机器人的有效设备。这些标签允许您指示应该记录哪些页面，应该在哪些页面之后拍摄，以及应该在外观中显示哪些内容。在任何情况下，这些标签的基地外使用都会影响您网站的外观电机排名。谨慎使用这些标签并与其他 SEO 最佳磨练相结合至关重要，以确保您的网站针对外观电机进行适当优化。
