谷歌推出新型Googlebot 将针对智能手机

leixue 站长新闻 2014-02-23 11:50:51 阅读(...) 评论(0)

原来谷歌抓取移动设备的蜘蛛统称为 Googlebot 移动版,谷歌分析称受此项更新影响的网址不到 0.001%,而此项更新可让站长更好地控制对其内容的抓取和编入索引操作。
谷歌推出新型 Googlebot 将针对智能手机
由于功能手机和智能手机的功能存在很大差异,站长一旦屏蔽了 Googlebot 那么移动版的则全部屏蔽。而这次谷歌称:谷歌将针对智能手机的新型 Googlebot 用户代理。

这个蜘蛛大概是未来 3、4 周后开始工作,且不再将针对智能手机的“Googlebot-Mobile”用作用户代理。之后,针对智能手机的用户代理将直接使用“Googlebot”进行标识。这样即使屏蔽了功能手机的收录,但针对智能手机的优化不会有影响。

针对智能手机的新型 Googlebot 用户代理:

Mozilla/5.0 (iPhone; CPU iPhone OS 6_0 like Mac OS X) AppleWebKit/536.26 (KHTML, like Gecko) Version/6.0 Mobile/10A5376e Safari/8536.25 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

针对智能手机的 Googlebot-Mobile 用户代理(即将停止使用):

Mozilla/5.0 (iPhone; CPU iPhone OS 6_0 like Mac OS X) AppleWebKit/536.26 (KHTML, like Gecko) Version/6.0 Mobile/10A5376e Safari/8536.25 (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html)

请注意此项用户代理更新带来的以下重大影响:针对智能手机的新型 Googlebot 抓取工具将遵从 Googlebot(而非 Googlebot-Mobile)的 robots.txt 指令、robots 元标记指令和 HTTP header 指令。例如,使用新型抓取工具后,以下 robots.txt 指令将屏蔽针对智能手机的新型 Googlebot 用户代理以及常规 Googlebot 执行的所有抓取操作:

User-agent: Googlebot
Disallow: /
以下 robots.txt 指令将屏蔽 Google 的功能手机抓取工具执行的抓取操作:

User-agent: Googlebot-Mobile
Disallow: /

以上来自谷歌博客的消息!

除非注明,否则均为泪雪博客原创文章,禁止任何形式转载

本文链接:https://zhangzifan.com/googlebot-mobile.html

发表评论

登录 后参与评论