Robots.txt et llms.txt pour les crawlers IA — un modèle prêt à l'emploi
Les moteurs de réponse IA ont leurs propres crawlers. ChatGPT utilise GPTBot. Claude utilise ClaudeBot. Perplexity utilise PerplexityBot. (Traduction à venir — contenu complet disponible en anglais.)
Lire la suite →