User-agent: * Disallow: /cgi-bin/ Disallow: /wp-admin/ # admin-ajax.php est appele par le front (5 fois sur l'accueil) : sans cette # autorisation, Googlebot ne peut pas restituer les contenus charges en AJAX. # C'est l'exception que WordPress place lui-meme dans son robots.txt par defaut. Allow: /wp-admin/admin-ajax.php Disallow: /wp-login.php Disallow: /recommended/ Disallow: /comments/feed/ Disallow: /trackback/ Disallow: /index.php Disallow: /xmlrpc.php # Laisser passer tous les fichiers de rendu Allow: /*.css$ Allow: /*.js$ Allow: /*.woff$ Allow: /*.woff2$ Allow: /*.ttf$ Allow: /*.otf$ Allow: /*.eot$ Allow: /*.svg$ # (Optionnel) Resserre spécifiquement pour WordPress (utile si certains bots gèrent mal $) Allow: /wp-content/*.css Allow: /wp-content/*.js Allow: /wp-content//.css Allow: /wp-content//.js Allow: /wp-content///*.css Allow: /wp-content///*.js Allow: /wp-includes/*.css Allow: /wp-includes/*.js Allow: /wp-includes//.css Allow: /wp-includes//.js # Exemples de chemins fréquemment minifiés/cache (cache plugin/CDN) Allow: /wp-content/cache//.css Allow: /wp-content/cache//.js Allow: /wp-content/cache/background-css//.css Allow: /wp-content/cache/min//.css Allow: /wp-content/cache/min//.js # Bloquer les flux/feeds si tu le souhaites (sans impacter le rendu) Disallow: /*/feed/ Disallow: /feed/ Disallow: /*/rss/ Disallow: /events/*/?event_rdate=* Disallow: /*? User-agent: NinjaBot Allow: / User-agent: Mediapartners-Google* Allow: / User-agent: Googlebot-Image Allow: /wp-content/uploads/ User-agent: Adsbot-Google Allow: / User-agent: Googlebot-Mobile Allow: / Sitemap: https://cnfse.fr/wp-sitemap.xml