Une petite recherche t'aurais donnée la réponse :
Les termes » crawler » , « spiders » et « robots », se rapportent tous à un logiciel d'indexation qui est conçu pour passer en revue ...
www.dievochka.com/vocabulaire-referencement/robot (voir crawler)
blog.paradiseo.fr/lexique
Ce sont les robots des moteurs de recherche. Des « espions » charger de visiter votre site à fin de pouvoir l'indexer dans les moteurs de ...
fr.phenixcreation.com/lexique/s.html
Tu aurais aussi pu le déduire en regardant les mots associés :
Yahoo spider, MSN spider, Google spider
Yahoo, MSN, Google = Moteur de recherche
---> "visites" spécifiques aux moteurs de recherche --> Robot automatique permettant de visiter les pages et leurs contenus.