元标签
计算机显示器上显示的元标记代码的特写
标签 meta robots index ,关注– 作用、重要性和应用
元信息有很多种类型,其中最受欢迎的是元标题和元描述等元素,它们用于告知搜索引擎网页上发布的给定内容的标题和描述。因此,使用元标签来传输元数据,即 Google 机器人和其他程序的基本信息。 Meta robots 标签略有不同。这些元素在执行的功能上有所不同,因为除了通知机器人之外,它们还指示网站所有者允许的活动范围。
Meta robots 包含有关针对搜索引擎爬虫的页面的重要信息。
Meta robots 标签传达的信息称为指令,这意味着爬虫程序必须遵循网站所有者在其中包含的说明。