Un Crawl over Crawl vous permet de comparer les résultats d'un crawl en cours avec ceux de crawls précédents dans le même projet. C'est essentiel pour suivre les changements dans le temps, pour comparer différentes versions d'un même site (production/staging, mobile/desktop, différentes régions...) ou pour examiner l'impact des corrections et modifications que vous avez mises en œuvre sur votre site web.
Voici comment mettre en place un crawl over crawl et ce à quoi il faut s'attendre lorsqu'il est terminé.
Ce dont vous avez besoin pour pouvoir faire un Crawl over Crawl
Crawl over Crawl est une caractéristique des projets avancés. Avant de commencer, vous devez vous en assurer :
Votre plan comprend des projets avancés. (La fonction "Crawl over Crawl" est une caractéristique des projets avancés).
Le projet dans lequel vous allez créer un crawl over crawl a été converti en projet avancé. Si ce n'est pas le cas et qu'il vous reste des projets avancés, vous devez maintenant convertir votre projet normal en projet avancé.
Un Crawl over Crawl compare deux crawls dans le même projet. Idéalement, ces crawls devraient :
Soit couvrir la totalité du même site.
(Cela signifie que les deux crawls devraient avoir les mêmes URL de départ, sous-domaines, profondeur...)
Soit couvrir l'ensemble d'une seule et même version du même site.
(Par exemple, si vous voulez comparer les versions mobile et de bureau d'un site, vous devez comparer un crawl de la version de bureau uniquement avec un crawl de la version mobile uniquement).
Si les crawls que vous voulez comparer ont plusieurs URL de démarrage, il est possible qu'OnCrawl ne puisse pas déterminer comment comparer vos sites. Si c'est le cas, vous verrez un message d'erreur lors de l'étape suivante. Ce message vous demandera de nous contacter pour vous aider à établir votre comparaison. Vous pouvez nous joindre en cliquant sur le bouton de chat bleu en bas de n'importe quel écran.
Vous pouvez obtenir des crawls comparables de deux manières différentes :
Lancer un nouveau crawl avec l'option Crawl over Crawl activée : lancer un nouveau crawl avec les mêmes URL de départ et les mêmes paramètres de sous-domaine qu'un crawl existant.
Lancer une analyse Crawl over Crawl en utilisant deux crawls existants : choisir deux crawls avec la même URL de départ et les mêmes paramètres de sous-domaine. S'il y a plusieurs URL de départ, elles doivent toutes correspondre et exécuter une analyse "Crawl over Crawl" uniquement.
Option 1 : crawl over crawl avec un nouveau crawl
Pour cette option, vous devez avoir sélectionné un crawl existant que vous souhaitez comparer à un nouveau crawl que vous êtes sur le point de mettre en place et d'exécuter.
Tout d'abord, vérifiez les paramètres utilisés pour le crawl existant en survolant l'icône située à côté du paramètre du crawl dans la liste des rapports de crawl sur la page d'accueil de votre projet.
Sur la page d'accueil du projet, cliquez sur "+ Setup new crawl" pour définir les paramètres de votre nouveau crawl.
Vérifiez que les paramètres suivants pour le nouveau crawl sont les mêmes que ceux du crawl existant. Si vous utilisez la même configuration de crawl, il est probable que ce sera déjà le cas.
1 - Si vous souhaitez consulter deux instantanés du même site à des moments différents, par exemple avant et après une modification, vous devrez fournir la même URL de départ et toute autre URL de départ supplémentaire utilisée dans votre crawl précédent. Cela peut être fait sous "URL de départ".
2 - Sous "Crawl over Crawl" dans la section "Analyse", cochez la case "Générer le crawl over crawl avec le crawl précédent".
Cette troisième étape consistera à effectuer l'analyse "crawl over crawl" pour comparer les deux crawls lorsque le robot aura terminé le crawl actuel.
Vous pouvez maintenant lancer votre nouveau crawl.
Une fois le nouveau crawl et l'analyse terminés, vous aurez accès au rapport de Crawl over crawl dans les résultats de l'analyse pour ce crawl et le crawl existant.
Option 2 : crawl over crawl avec deux crawls existants
Si vous n'avez pas prévu de comparer deux crawls, mais que leurs URL de départ et leurs paramètres de sous-domaine sont identiques, vous pouvez ajouter l'analyse "crawl over crawl" à tout moment par la suite.
N'oubliez pas que vous pouvez consulter les paramètres utilisés pour n'importe quel crawl de votre projet en survolant l'icône située à côté du paramètre du crawl dans la liste des rapports de crawl sur la page d'accueil de votre projet.
Depuis la page d'accueil du projet, lancez un crawl over crawl :
1 - Sous "Tâches", cliquez sur l'onglet "Exécution du crawl over crawls".
2 - Cliquez sur "+ Lancer le crawl over crawl".
3 - Sélectionnez les deux crawls que vous souhaitez comparer.
Lorsque vous cliquez sur "+ Lancer le crawl over crawl", OnCrawl analyse les différences entre les deux crawls existants et ajoute le rapport Crawl over Crawl aux résultats d'analyse des deux crawls.
Vous pouvez suivre la progression de ce crawl over crawl dans l'onglet "Lancer le crawl over crawl" sur la page d'accueil du projet. Comme le crawl est déjà terminé, le crawl over crawl sautera l'état "Crawling" et commencera directement par "Analyse".
Données d'un Crawl over Crawl
Une fois que vous disposez d'un crawl avec une analyse crawl over crawl disponible, vous pouvez consulter le rapport crawl over crawl.
Tous les crawls avec un rapport de Crawl over Crawl disponible apparaîtront dans la liste des crawls sur la page d'accueil du projet avec un symbole bleu de Crawl over Crawl dans la colonne "Analyse" :
Cliquez sur "Afficher l'analyse" pour accéder aux rapports de crawl. Dans la barre latérale, cliquez sur "Crawl over Crawl" pour afficher les différents tableaux de bord disponibles dans le rapport Crawl over Crawl.
Si plusieurs crawls peuvent être comparés avec celui que vous regardez, vous pouvez utiliser le menu "Comparé avec un crawl" en haut de la page pour changer le crawl avec lequel vous voulez comparer le crawl actuel.
Les graphiques du rapport "Crawl over Crawl" indiqueront les différences entre les crawls de multiples façons :
En fournissant des chiffres pour les deux crawl, souvent accompagnés du pourcentage de changement d'un crawl à l'autre.
En montrant les résultats des deux crawls sur le même graphique.
En présentant une analyse des changements entre les deux crawls.
En comparant la répartition d'un crawl à l'autre pour montrer comment les URL ayant des caractéristiques données ont été modifiées.
Dans le Data explorer
Lorsque vous consultez les données de Crawl over Crawl dans l'explorateur de données, vous verrez deux colonnes d'URL : une pour les URL de Crawl 1 et une pour les URL de Crawl 2. Si vous avez comparé deux versions du même site, ces URLs peuvent être différentes.
Aller plus loin
Si vous avez encore des questions sur l'exécution d'un crawl over crawl, écrivez-nous à @oncrawl_cs ou cliquez sur le bouton Intercom en bas à droite de votre écran pour entamer une discussion avec nous.