Hinweis der Übersetzung (de): Dieser Artikel wurde noch nicht ins Deutsche übersetzt. Der vollständige Text bleibt unten auf Englisch. Die deutsche Übersetzung steht auf der Roadmap. Englisches Original lesen .
AI answer engines have their own crawlers. They are not the same as Googlebot, they do not behave the same way, and the rules you set for them go in three different files: robots.txt, llms.txt, and your sitemap.
For the full article, see the English original .