google爬蟲是什么？

Google爬蟲

算法優秀，反應速度迅速，對內容質量把握優秀，中等強度爬蟲程序，對服務器負擔不大，推廣效果好。

對應user-agent：爬蟲名稱

Googlebot：google網頁爬蟲

Googlebot-news：google新聞爬蟲

Googlebot-image：google圖片爬蟲

Googlebot-video：google視頻爬蟲

Googlebot-mobile：google移動爬蟲

Mediapartners-google或Mediapartners(googlebot)：google廣告爬蟲

Adsbot-google：google著陸頁質量檢測爬蟲