Robots.txt und llms.txt für KI-Crawler — eine sofort einsetzbare Vorlage
KI-Antwortmaschinen haben eigene Crawler. ChatGPT nutzt GPTBot. Claude nutzt ClaudeBot. Perplexity nutzt PerplexityBot. (Übersetzung folgt — vollständiger Inhalt im englischen Original.)
Weiterlesen →