Googlebot 有哪几种?

63,751次阅读

Googlebot 我们一般称为Google 机器人或Google 探测器。Google “派遣”了不同的Googlebot 对网页内容进行获取。


Googlebot 有哪几种?主要包括:

1、Googlebot:抓取网页中的文字内容。获取的内容保存于Google 网页搜索和新闻搜索的数据库。我们一般谈的Google 机器人主要指这个。

2、Googlebot-Mobile:抓取网页中的文字内容,用于Google 手机搜索。

3、Googlebot-Image:抓取网页内的图片内容,保存入Google 图片搜索数据库。

4、Mediapartners-Google:抓取网页中的文字内容,用于Google Adsense 分析关键词。只有投放了Google Adsense 的网页才会被 Mediapartners-Google 探测器爬取。

5、Adsbot-Google:抓取网页中的文字内容,用于为Google AdWords 提供参考。只有Google AdWords  的目标网页才会被 Adsbot-Google 探测器爬取。


Googlebot 和Mediapartners-Google 是非常勤奋的机器人,如果他们影响到你服务器的承受力,你可以通过 robots.txt 文件加以制止。

阅读本文的人还感兴趣

Google网站管理员工具是什么?

Google关键字工具

Google网站流量统计


作者:夫唯学院SEO培训  修订1.1  2018-12-14

搜外专注SEO在线系统培训,10年来超过五万学员在此获得技术提升和人脉圈子。

SEO课程已融入到移动搜索、零基础建站、群站SEO思维、搜外6系统、SEM入门等。

欢迎添加助教微信:seowhy2018,马上获得优秀学员案例。