Die 5 Säulen der technischen Implementation

Lektion 3.1: Säule 1 — Crawler-Steuerung (robots.txt für KI)

Die robots.txt ist seit Jahrzehnten das Standardmittel, um Webcrawlern mitzuteilen, welche Bereiche sie besuchen dürfen. Was sich geändert hat: Eine ganz neue Generation von KI-Crawlern muss explizit adressiert werden.

Die wichtigsten KI-Crawler

Crawler	Betreiber	Funktion
GPTBot	OpenAI	Training + Web-Browsing für ChatGPT
ChatGPT-User	OpenAI	Echtzeit-Browsing in Chat-Sessions
ClaudeBot	Anthropic	Claude-Training + Browsing
PerplexityBot	Perplexity	Echtzeit-Crawling bei Suchanfragen
Google-Extended	Google	Gemini-Training
Meta-ExternalAgent	Meta	Meta AI Training

Best Practice — robots.txt Template

# AI Engine Crawlers — Erlaubt
User-agent: GPTBot
Allow: /

User-agent: ChatGPT-User
Allow: /

User-agent: ClaudeBot
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: Google-Extended
Allow: /

# Sitemap: https://example.com/sitemap.xml
# llms.txt: https://example.com/llms.txt

Die 3 häufigsten Fehler

1. 404 auf robots.txt: KI-Crawler crawlen konservativ → weniger Daten, weniger Zitationen.
2. Globales Disallow: /: Sperrt alles, oft ein Relikt aus der Entwicklung.
3. Netzwerk-Level Bot-Protection: Cloudflare/Akamai blockieren Bots bevor sie die robots.txt erreichen.

Lektion 3.2: Säule 2 — llms.txt — Die KI-Visitenkarte

Die /llms.txt ist ein Proposed Standard (llmstxt.org, Jeremy Howard, fast.ai). Sie liefert Sprachmodellen ein hochdichtes Fakten-Briefing — wie eine sitemap.xml für Suchmaschinen, nur für LLMs.

Struktur einer professionellen llms.txt

# Markenname
> Ein-Satz-Mission mit maximaler semantischer Dichte.

## Über Uns
Kurzprofil: Gründungsjahr, Standort, Branche, Teamgröße.

## Produkte / Services
- **Produkt A**: Faktenbasierte Beschreibung, USP, Preisbereich
- **Produkt B**: Technische Spezifikationen, Ergebnisse

## Expertise & Credentials
ISO 9001, Awards, Referenzkunden

## FAQ
- **Was kostet [Produkt]?** Ab €X/Monat.
- **Für wen geeignet?** [Konkrete Zielgruppe].

## Kontakt
Website, E-Mail, Standort, Geschäftsführung

Die 4 goldenen Regeln

1. Faktendichte statt Marketing-Sprech. „120 Mitarbeiter an 3 Standorten" statt „ein dynamisches Team".
2. Zitierbare Sätze. Jeder Satz muss 1:1 in einer KI-Antwort funktionieren.
3. Konsistenz mit der Website. Widersprüche → KI vertraut keiner Quelle.
4. Maximal 4.000 Tokens (ca. 2-3 DIN-A4-Seiten).

Lektion 3.3: Säule 3 — Strukturierte Daten (JSON-LD Schema)

JSON-LD ist ein W3C-Standard und das bevorzugte Format für maschinenlesbare, strukturierte Daten. Es liefert eine eindeutige „Übersetzung" der Seiteninhalte.

Analogie: HTML ohne JSON-LD ist wie ein Buch ohne Inhaltsverzeichnis. Die Information ist irgendwo drin, aber man muss alles durchlesen.

Pflicht-Schemata

Schema-Typ	Wofür	Priorität
Organization	Wer ist das Unternehmen?	🔴 Pflicht
WebSite	Was ist die Website?	🔴 Pflicht
BreadcrumbList	Seitenstruktur	🔴 Pflicht
FAQPage	Häufige Fragen	🔴 Pflicht
Person	Experten	🟡 Hoch
Product / Service	Angebote	🟡 Hoch

{
  "@context": "https://schema.org",
  "@type": "Organization",
  "name": "Beispiel GmbH",
  "url": "https://beispiel.de",
  "foundingDate": "2005-03-15",
  "numberOfEmployees": { "@type": "QuantitativeValue", "value": 120 },
  "address": {
    "@type": "PostalAddress",
    "addressLocality": "Düsseldorf",
    "addressCountry": "DE"
  },
  "sameAs": [
    "https://linkedin.com/company/beispiel",
    "https://de.wikipedia.org/wiki/Beispiel_GmbH"
  ]
}

Lektion 3.4: Säule 4 — Visual GEO (Bilder für KI optimieren)

Moderne KI-Modelle sind multimodal: GPT-4o, Gemini und Claude können Bilder inhaltlich verstehen. Alt-Texte sind damit ein aktives KI-Signal.

Die Alt-Text-Formel

[Subjekt] + [Kontext] + [Material/Eigenschaft] + [Marke]

Alt-Text	Qualität
"Serum"	❌ Nutzlos
"Vitamin C Serum Flasche"	⚠️ Besser
"Vitamin C Glow Serum, 30ml Glasflakon mit Pipette, MIRI Cosmetics"	✅ Exzellent

Lektion 3.5: Säule 5 — Answer Density

KI-Agenten extrahieren Antworten bevorzugt aus den ersten 50–100 Wörtern nach der H1. Wer hier leere Marketing-Phrasen platziert, verschenkt die wertvollste zitierfähige Fläche.

Schlechtes Beispiel (80% aller Websites)

„Willkommen bei Beispiel GmbH. Wir sind ein dynamisches Unternehmen, das seit vielen Jahren mit Leidenschaft und Innovation daran arbeitet..."

Gutes Beispiel (Answer Density optimiert)

„Beispiel GmbH ist der führende DACH-Anbieter für industrielle Filtertechnik seit 2005. 120 Mitarbeiter an 3 Standorten, ISO 9001 und ISO 14001 zertifiziert. HEPA-14-Filter mit 99,995% Abscheidegrad."