Le crawl comme processus de découverte dans lequel les moteurs de recherche envoient une équipe de robots, connu sous le nom de chenilles ou d'araignées, pour trouver du contenu nouveau et mis à jour. Le contenu peut varier et il peut s'agir d'une page de site Web, une image, une vidéo, un PDF, mais quel que soit le format, le contenu est découvert et les liens sont renvoyés à Google car ils ont été récupérés par ces robots d'exploration. Et Google l'indexera avec l'URL pour les différents sites. Voyons maintenant Google Search Console, et je vais te montrer quoi, ce que nous recherchons dans Google Search Console pour voir si notre site Web a été exploré récemment et le type d'informations qu'il a recueillies. Voici donc la page de notre site. Encore une fois, c'est notre site de bain à remous. Et si on va ici et qu'on regarde c'est, la page est une redirection car c'est HTTP et nous le redirigeons vers HTTPS. Donc dans ce cas, je ne veux pas, je veux qu'il rampe, mais en ce qui concerne ce que nous faisons, nous le redirigeons en fait vers le site sécurisé. Donc je n'en ai vraiment pas besoin pour indexer, mais il est exploré, normalement comme il se doit. Examinons donc quelques-uns des problèmes que nous rencontrons lorsque nous avons des problèmes d'exploration ou d'indexation. Allons par ici et, bien sûr, vous pouvez toujours demander un index ici dans Google. Lorsque vous demandez l'indexation, vous n'en aurez qu'une vingtaine par jour que Google Search Console vous permettra de faire. Une fois que vous avez dépassé cela, tu vas devoir attendre le lendemain. Et puis après avoir fait ces jours consécutifs de 20, disons que vous avez un grand site Web, une fois que vous avez fait cela, il vous verrouillera en fait pendant sept jours et vous devrez attendre. Donc vous savez, environ 20 par jour. Si vous obtenez 60 URL, demandez un index, c'est beaucoup et c'est substantiel et vous devriez en fait envisager quelles pages Web sont les plus importantes, surtout lorsque vous construisez un site. S'il fait bien plus de 60 pages, quelles pages sont les plus importantes avoir d'abord indexé Google puis demandez ces pages. Et vous pouvez aller ici dans Google Search Console et regardez, le site est-il disponible pour l'indexation, et vous pouvez regarder les résultats et regarder et voir quand a-t-il été rampé pour la dernière fois, l'indexation est-elle autorisée ? Ici avec l'indexation, si jamais il dit que l'indexation n'est pas autorisée ou NA, ou est-il autorisé à être exploré, cela va être dans votre fichier doc de bot. Alors ici dans Google Search Console, nous pouvons en fait utiliser ce qu'on appelle un testeur bot.TXT, et cela nous permettra de récupérer la doc du bot et voir s'il y a des problèmes ici dans le document qui limiterait ce que les robots d'exploration de Google sont autorisés à voir et ce qu'ils sont autorisés à indexer. Il est important de noter que nous avons un budget de crawl avec notre site et les bots Google ne viendront que grignoter sur notre site Web à tout moment. Alors comme vous pouvez le voir ici, la dernière fois que le site a été exploré était le 21. Ce n'est pas rampé tous les jours, il n'est pas exploré chaque semaine. C'est une de ces choses que Google viendra le visiter et puis peut-être revenir dans quelques semaines. C'est donc quelque chose à considérer, surtout lorsque nous construisons des sites et du référencement dans les sites. Et puis parfois ça prend un peu de temps pour où l'indexation à rattraper là où nous voulons être. Et une partie de cela est nous devons aller dans le backend du site Web et vider le cache et faire ce genre de choses et en gros, dites à Google, Hé, nous avons rafraîchi notre site. Vous pouvez le faire ici dans Google Search Console, par requête d'indexation ou vue de page crawlée, et même faire un test en direct, puis afficher la page testée là-bas. Et cela vous donnera essentiellement une analyse manuelle. Ainsi, même s'il n'est pas indiqué d'explorer mon site Web, si vous faites ce test en direct, Google envoie essentiellement des bots pour aller voir votre site sur une URL particulière. C'est donc un bon moyen de se déplacer et fondamentalement encourager Google à le regarder. Alors comme vous pouvez le voir ici, Google a exploré le smartphone et il a été exploré aujourd'hui. Donc, cela mettra à jour qu'il a été exploré ici sous peu et nous n'aurons pas à nous soucier autant de ce site Web. Alors allons-y, nous avons parlé du bot doc. Nous avons parlé de la façon de trouver le doc du bot et comment le modifier. Donc, ici dans Google Search Console, Je peux en fait aller dans ce fichier et bloquer les URL ici. Je peux les mettre. Je peux les mettre ici pour interdire une URL particulière. Dans ce cas, nous avons interdit les portails d'administration pour notre site Web. Allons voir comment demander que les URL soient bloquées dans la console de recherche Google. On peut donc faire un blocage de 30 jours ou temporaire dans la console de recherche Google, et dites-lui essentiellement de ne pas couvrir certaines pages ou que nous sommes, nous supprimons certaines pages ici dans la Search Console. Voici donc les suppressions dans la Search Console. Et c'est ce que nous allons utiliser passer et faire un déménagement temporaire. Disons que nous mettons à jour une page ou nous voulons qu'il ne soit pas indexé jusqu'à ce qu'il soit prêt. Disons que nous construisons un magasin. Mais nous sommes, qu'arrivera-t-il parfois, et c'est un peu embarrassant quand ça arrive, c'est que parfois les gens vont construire comme une page de remise spéciale pour hommes et ils vont semi-lancer cette page par inadvertance. Donc c'est juste mieux si vous avez en quelque sorte, soit le mettre dans un bot doc comme temporairement bloqué ou mettez-le ici comme vos suppressions temporaires puis passez-le et retirez-le plus tard lorsque vous êtes prêt à lancer cette page. Cela arrive parfois, Google va en fait explorer une page qui apparaîtra en fait comme un 404 pour disons une page de remise spéciale pour la fête des pères. Et il sera en fait indexé dans Google avant que nous soyons réellement prêts à lancer cette page. Parfois ça arrive et quand ça arrive, c'est un peu rare maintenant, mais cela arrivait beaucoup plus souvent. Et c'est une de ces choses que nous pouvons traverser ici et demandez-le. Nous pouvons également soumettre certaines pages dont le contenu est obsolète et dire en gros, Hé, nous avons ce contenu obsolète toujours dans Google. Pouvez-vous explorer cette page ? C'est donc ainsi qu'il faut procéder. Et c'est une façon de faire temporaire, parcourir et ajouter certaines pages ici. D'accord, donc dans cette vidéo, nous avons couvert l'exploration et certains des outils pour l'exploration de sites Web et comment soumettre un doc de bot. Nous pouvons donc aller sur Google et ouvrir le testeur de bot doc, et soumettre un bot doc pour une propriété donnée, ajouter une propriété, soumettre une propriété. Voici donc comment nous procédons et ajoutons réellement des documents de bot aux propriétés pour aller sur Google, puis vous accédez à la Search Console. Très bien, dans une future vidéo, nous couvrirons mots-clés et planification de mots-clés, ainsi que d'autres choses sur la conception de sites Web. Très bien, on se voit dans la prochaine vidéo.