Logiciel souvent appelé " spider ", " crawler " et " bot " utilisé par les moteurs de recherche afin de repérer et d'indexer dans leurs bases de données les pages web et le contenu des différents sites Internet. Chaque moteur de recherche a un robot qui lui est propre. Le crawler de Google par exemple est appelé Googlebot.