Googlebot

Google’ın tarayıcısı: sayfaları isteyen, render eden ve indeksi besleyen yazılım.

İki ana user agent ile gelir — akıllı telefon ve masaüstü — ve sitenizin nasıl değerlendirileceğine karar veren mobil olanıdır.

Bir log satırına güvenmeden önce botu doğrulayın; user agent bilgisi, Google gibi görünmek isteyen kazıyıcılar tarafından kolayca taklit edilir.

robots.txt kuralları, render kararları ve hız sınırlarının tamamı bir tarayıcıya değil bu istemciye karşı işler.

Googlebot’un hangi bölümlere ne sıklıkta uğradığını bilmek, tarama dikkatinin gerçekte nereye gittiğini gösterir.