Repository navigation
[SEO T1.7] Déclare le sitemap dans le robots.txt - #2469
Draft
xavierleune wants to merge 1 commit into
Draft
xavierleune wants to merge 1 commit into
xavierleune wants to merge 1 commit into
Conversation
Les moteurs ne découvrent l'index /sitemap.xml (généré par PrestaSitemapBundle) que s'il est soumis à la main ou déclaré dans le robots.txt. La directive Sitemap est indépendante des groupes User-agent : elle est placée en tête de fichier, sans toucher aux blocages des robots IA. Un scénario Behat vérifie la présence de la directive et que l'URL déclarée répond bien un index de sitemaps.
This file contains hidden or bidirectional Unicode text that may be interpreted or compiled differently than what appears below. To review, open the file in an editor that reveals hidden Unicode characters.
Learn more about bidirectional Unicode characters
Sign up for free
to join this conversation on GitHub.
Already have an account?
Sign in to comment
Add this suggestion to a batch that can be applied as a single commit.This suggestion is invalid because no changes were made to the code.Suggestions cannot be applied while the pull request is closed.Suggestions cannot be applied while viewing a subset of changes.Only one suggestion per line can be applied in a batch.Add this suggestion to a batch that can be applied as a single commit.Applying suggestions on deleted lines is not supported.You must change the existing code in this line in order to create a valid suggestion.Outdated suggestions cannot be applied.This suggestion has been applied or marked resolved.Suggestions cannot be applied from pending reviews.Suggestions cannot be applied on multi-line comments.Suggestions cannot be applied while the pull request is queued to merge.Suggestion cannot be applied right now. Please check back later.
Contexte
Le
robots.txtne déclare pas le sitemap. L'index/sitemap.xml(généré par PrestaSitemapBundle) n'est donc découvert par les moteurs que s'il est soumis à la main dans leurs consoles.Changements
htdocs/robots.txt: ajout deSitemap: https://afup.org/sitemap.xmlen tête de fichier, séparée du reste par une ligne vide. La directiveSitemapne dépend d'aucun groupeUser-agent. Les blocages des robots IA ne changent pas.Tests
tests/behat/features/PublicSite/Robots.feature:/robots.txtrépond 200 et contientSitemap: https://afup.org/sitemap.xml;/sitemap.xmlrépond 200 et contient<sitemapindex: l'URL déclarée est bien un index de sitemaps.robots.txtde master, le premier scénario échoue (« The string "Sitemap: https://afup.org/sitemap.xml" was not found ») ; quand l'import des routes Presta est retiré temporairement, le second échoue (404 au lieu de 200). Les deux repassent au vert une fois le code restauré.Points d'attention
https://afup.org) : le fichier est statique et servi par Apache, si bien qu'on ne peut pas le rendre dynamique sans changer d'approche. Le test vérifie donc la chaîne de production telle quelle.seo/t1.6-joindin-nofollow, qui ajoute un blocUser-agent: *en fin de fichier. Le merge devrait se faire sans conflit.🤖 Generated with Claude Code