Bonjour à tous,
J'ai un souci récurrent avec mon fichier robots.txt sur ma boutique PrestaShop. Je l'édite manuellement pour mieux gérer le budget de crawl et éviter l'indexation de pages inutiles (recherche, panier, etc.), mais dès que je touche à quelque chose dans l'onglet SEO & URLs, le fichier est régénéré et mes modifications sont perdues.
Le plus embêtant, c'est que la version générée par défaut bloque parfois l'accès à certains de mes fichiers CSS et JS (souvent ceux dans /themes ou /modules), ce qui me cause des pénalités d'ergonomie mobile dans Google Search Console. C'est frustrant !
Comment faire pour avoir un contrôle total sur mon robots.txt sans qu'il soit écrasé ? Et concernant le sitemap XML, y a-t-il des bonnes pratiques pour s'assurer qu'il est bien pris en compte par les moteurs de recherche et qu'il inclut toutes les bonnes pages ?