google爬虫是什么？
Google爬虫
算法优秀，反应速度迅速，对内容质量把握优秀，中等强度爬虫程序，对服务器负担不大，推广效果好。
对应user-agent：爬虫名称
Googlebot：google网页爬虫
Googlebot-news：google新闻爬虫
Googlebot-image：google图片爬虫
Googlebot-video：google视频爬虫
Googlebot-mobile：google移动爬虫
Mediapartners-google或Mediapartners(googlebot)：google广告爬虫
Adsbot-google：google着陆页质量检测爬虫
