# robots.txt — www.auto-und-service.de
#
# Die Seite ist bewusst fuer klassische Suchmaschinen UND fuer KI-Antwort-
# maschinen offen: Sichtbarkeit in ChatGPT, Perplexity, Google AI Overviews
# oder Copilot entsteht nur, wenn deren Crawler die Inhalte lesen duerfen.
#
# Diese Datei wird von build.mjs erzeugt (buildRobots) — nicht direkt editieren.

User-agent: *
Disallow: /danke
Disallow: /404
Disallow: /_shell/
Allow: /

# --- KI-Trainings-, Such- und Live-Abruf-Crawler (ausdruecklich erlaubt) -----
# Wer sie aussperren will, aendert genau diese Gruppe.
# OpenAI: GPTBot = Training, OAI-SearchBot = Index fuer ChatGPT Search,
# ChatGPT-User = Live-Abruf, wenn jemand im Chat nach uns fragt.
User-agent: GPTBot
User-agent: OAI-SearchBot
User-agent: ChatGPT-User
# Anthropic (Claude)
User-agent: ClaudeBot
User-agent: Claude-User
User-agent: Claude-SearchBot
User-agent: anthropic-ai
# Perplexity
User-agent: PerplexityBot
User-agent: Perplexity-User
# Google — Google-Extended steuert Gemini/Vertex, unabhaengig vom Suchindex
User-agent: Google-Extended
# Microsoft / Bing, auch Copilot
User-agent: Bingbot
# Apple Intelligence / Siri
User-agent: Applebot
User-agent: Applebot-Extended
# Meta AI
User-agent: meta-externalagent
# Weitere Antwortmaschinen
User-agent: Amazonbot
User-agent: DuckAssistBot
User-agent: MistralAI-User
User-agent: cohere-ai
User-agent: YouBot
Disallow: /danke
Disallow: /404
Disallow: /_shell/
Allow: /

# Fuer LLMs aufbereitete Kurzfassung der Website (Konvention: llmstxt.org):
#   https://www.auto-und-service.de/llms.txt        — Struktur, Eckdaten, alle Seiten
#   https://www.auto-und-service.de/llms-full.txt   — kompletter Seitentext
# Der Fahrzeugbestand steht als Text (ohne JavaScript lesbar) auf
#   https://www.auto-und-service.de/fahrzeuge
# Die Fahrzeug-Detailseiten liegen auf fahrzeuge.auto-und-service.de und
# bringen dort ihre eigene robots.txt und sitemap.xml mit (Autegro SSR) —
# deshalb steht hier keine Fahrzeug-Sitemap mehr.

Sitemap: https://www.auto-und-service.de/sitemap.xml