De manière schématique nous pouvons dire que le travail du robot se résume à 2 grandes missions :
- Explorer le web : visiter les pages et suivre les liens contenus dans ces pages.
- Indexer les pages : stocker le contenu de ces pages sur les serveurs de Google.
Sources : http://www.definitions-marketing.com/definition/googlebot/
https://optimiz.me/le-googlebot/