Hook
More breakout videos from this creator.
Un crawler est un logiciel, un robot qui a pour principale mission d'explorer le web afin d'analyser le contenu des documents visité et de les stocker de manière organisée dans un index. Le crawler parcourt donc différents sites et pages internet à la recherche de contenu nouveau ou des ventuelles mises à jour d'autres missions. Celle d'indexer les pages web en fonction de la qualité des contenus, ainsi aider les moteurs de recherche à classer les pages internet dans l'affichage des résultats de recherche. Web Google, ils permettent d'établir le classement des sites lors d'une recherche internet. Ils vont donc Analyser votre site internet, consulter vos ressources et vos pages pour savoir s'ils sont à jour et s'il n'y a pas de duplicate.