Grundsätzlich kann man bei den Bots zwischen zwei verschiedenen unterscheiden. Dem Fresh Bot und dem Deep Bot.
Dabei besteht der wesentliche Unterschied darin, dass der Freshbot von Google neue und aktuelle Inhalte craweld (durchsucht). Der Deep Bot hingegen ist für die Aktualisierungen von bereits indexierten Seiten verantwortlich.
Von Außen sind die beiden Bots fast nicht zu unterscheiden, da die Logdatein immer folgendermaßen aussehen: Googlebot/2.1.