DébutantPrompts SEO

Prompt Génération Robots.txt

Générez un fichier robots.txt complet et optimisé pour WordPress incluant les bonnes pratiques SEO. Ce prompt crée les règles de blocage admin, autorise CSS/JS pour rendering, bloque les environnements de dev et intègre votre sitemap XML. Prêt à copier-coller après validation dans Google Search Console.

Variables à personnaliser

{{DOMAINE}}Domaine

{{URL_SITEMAP}}URL sitemap

Aperçu en direct

Génère un fichier robots.txt pour {{DOMAINE}}. Inclus :
- Blocages pour tous les robots d'exploration de l'admin WordPress (/wp-admin, /wp-login.php)
- Blocages pour les sous-répertoires de staging et développement
- Autorisation d'accès aux fichiers CSS et JavaScript pour le rendu
- Un lien vers mon sitemap XML {{URL_SITEMAP}}

Code API

from openai import OpenAI

client = OpenAI()

response = client.chat.completions.create(
    model="gpt-4o",
    messages=[
        {"role": "user", "content": "Génère un fichier robots.txt pour {{DOMAINE}}. Inclus :\n- Blocages pour tous les robots d'exploration de l'admin WordPress (/wp-admin, /wp-login.php)\n- Blocages pour les sous-répertoires de staging et développement\n- Autorisation d'accès aux fichiers CSS et JavaScript pour le rendu\n- Un lien vers mon sitemap XML {{URL_SITEMAP}}"}
    ],
    temperature=0.4,
    max_tokens=1024,
)

print(response.choices[0].message.content)

Conseils d'utilisation

Testez toujours votre robots.txt généré avec le Robots.txt Tester de Google Search Console avant mise en production
N'oubliez pas d'autoriser l'accès aux CSS/JS (Allow: /wp-includes/*.css) sinon Google ne pourra pas évaluer le Mobile-First
Ajoutez un Crawl-delay: 10 si vous avez des problèmes de charge serveur avec des crawlers agressifs

Exemple de résultat

# Robots.txt pour example.com
# Généré le 2024-12-10

User-agent: *

# Bloquer l'accès WordPress admin
Disallow: /wp-admin/
Disallow: /wp-login.php
Disallow: /wp-includes/

# Bloquer environnements de développement
Disallow: /staging/
Disallow: /dev/
Disallow: /test/

# Autoriser CSS et JavaScript pour rendering
Allow: /wp-includes/*.css$
Allow: /wp-includes/*.js$
Allow: /wp-content/themes/*.css$
Allow: /wp-content/themes/*.js$

# Bloquer pages techniques
Disallow: /cgi-bin/
Disallow: /*?s=
Disallow: /*?p=

# Sitemap XML
Sitemap: https://example.com/sitemap.xml

# User-agents spécifiques
User-agent: GPTBot
Disallow: /

User-agent: CCBot
Disallow: /