Roboti AI služeb procházejí weby a sbírají obsah k trénování modelů nebo k odpovídání uživatelům. Mezi známé patří GPTBot, OAI-SearchBot, ChatGPT-User, ClaudeBot, PerplexityBot, Google-Extended nebo CCBot. V robots.txt můžete každému povolit nebo zakázat přístup. Když zakážete všechny, váš web se v odpovědích AI asistentů nebude objevovat.
FAQ / Slovníček pojmů