Što je Google Bot?

Softver za indeksiranje weba koji Google koristi za otkrivanje i indeksiranje web stranica za svoju tražilicu. Googlebot sustavno pregledava World Wide Web, prateći veze između stranica kako bi pronašao novi i ažurirani sadržaj. Analizira sadržaj, strukturu i odnose stranice s drugim stranicama, omogućujući Googleu rangiranje i prikaz relevantnih rezultata u upitima za pretraživanje. Vlasnici web-lokacija mogu kontrolirati Googlebotov pristup svojim web-lokacijama putem robots.txt datoteka i drugih direktiva. Poznat i kao Google pauk ili Google web crawler.