Un robot d'indexation est un logiciel qui a pour but d'explorer automatiquement les différents sites internet du web. Il est généralement conçu pour collecter les ressources de chacun de ces sites et ainsi permettre à un moteur de recherche de les indexer.