您的位置首页生活百科

谷歌机器人是做什么的?

谷歌机器人是做什么的?

Google SiteMap Protocol是Google自己推出的一种站点地图协议,此协议文件基于早期的robots.txt文件协议,并有所升级。在Google官方指南中指出加入了Google SiteMap文件的网站将更有利于Google网页爬行机器人的爬行索引,这样将提高索引网站内容的效率和准确度。文件协议应用了简单的XML格式,一共用到6个标签,其中关键标签包括链接地址、更新时间、更新频率和索引优先权。Google SiteMap文件生成后格式如下: http://www.google.com/schemas/sitemap/0.84">http://www.xx.com2005-06-03T04:20-08:00always1.0http://www.xx.com/300687.html2005-06-02T20:20:36Zdaily0.8XML标签 changefreq:页面内容更新频率。 lastmod:页面最后修改时间 loc:页面永久链接地址 priority:相氏谈对于其他页面的优先权顷毕 url:相对于前4个标签的父标签 urlset:相对于前5个标签的父标签 我将一句一句分解讲解这个xml文件的每一个标签: http://www.google.com/schemas/sitemap/0.84">这一行定义了此xml文件的命名空间,相当于网页文件中的标签一样的作用。这是具体某一个链接的定义入口,你所希望展示在SiteMap文件中的每一个链接都要用和包含在里面,这是必须的。 http://www.xx.com用描述出具体的链接地址,这里需要注意的是链接地址中的一些特殊字符必须转换为XML(HTML)定义的转义字符,如下表: 字符 转义后的字符 HTML字符 字符编码 and(和) & & & 单引号 ' ' ' 双引号 " " " 大于号 > > > 小于号 < < < 2005-06-03T04:20:32-08:00是用来指定该链接的最后更新时间,这个很重要。Google的机器人会在索引此链接前先和上次索引记录的最后更新时间进行比较,如果时间一样就会跳过不再索引。所以如果你的链接内容歼乎碰基于上次Google索引时的内容有所改变,应该更新该时间,让Google下次索引时会重新对该链接内容进行分析和提取关键字。这里必须用ISO 8601中指定的时间格式进行描述,格式化的时间格式如下: 年:YYYY(2005) 年和月:YYYY-MM(2005-06) 年月日:YYYY-MM-DD(2005-06-04) 年月日小时分钟:YYYY-MM-DDThh:mmTZD(2005-06-04T10:37+08:00) 年月日小时分钟秒:YYYY-MM-DDThh:mmTZD(2005-06-04T10:37:30+08:00) 这里需注意的是TZD,TZD指定就是本地时间区域标记,像中国就是+08:00了 always用这个标签告诉Google此链接可能会出现的更新频率,比如首页肯定就要用always(经常),而对于很久前的链接或者不再更新内容的链接就可以用yearly(每年)。这里可以用来描述的单词共这几个:"always", "hourly", "daily", "weekly", "monthly", "yearly",具体含义我就不用解释了吧,光看单词的意思就明白了。 1.0是用来指定此链接相对于其他链接的优先权比值,此值定于0.0 - 1.0之间 还有和,这两个就是来关闭xml标签的,这和HTML中的