User-agent: * Allow: / # AI / LLM crawlers — explicitly allowed (do not disallow these paths) User-agent: OAI-SearchBot Allow: / User-agent: GPTBot Allow: / User-agent: ChatGPT-User Allow: / # Anthropic: Claude-SearchBot und Claude-User holen die Inhalte, die in # Claude-Antworten zitiert werden. ClaudeBot ist der Training-Crawler, Claude-Web # ist veraltet. Bisher standen nur die beiden Letzteren hier -- die zwei # Retrieval-Bots waren nur ueber das Wildcard-Allow abgedeckt. User-agent: Claude-SearchBot Allow: / User-agent: Claude-User Allow: / User-agent: ClaudeBot Allow: / # Perplexity: PerplexityBot indexiert, Perplexity-User holt die Seite beim # Beantworten einer konkreten Nutzerfrage. User-agent: PerplexityBot Allow: / User-agent: Perplexity-User Allow: / User-agent: CCBot Allow: / User-agent: Google-Extended Allow: / Sitemap: https://www.niccos.com/sitemap.xml