Alle Anbieter von KI-Chatbots (uns eingeschlossen) erzählen dieselbe Geschichte: “Verbinden Sie Ihre Wissensdatenbank, und der Assistent antwortet mit Ihren Informationen”. Die Geschichte stimmt. Was fast nie gesagt wird, ist das Kleingedruckte: Der Assistent antwortet mit Ihren Informationen, so wie sie sind — und in den meisten Unternehmen bedeutet “so wie sie sind”: veraltet, widersprüchlich und unvollständig.
Ein Sprachmodell repariert schlechte Dokumentation nicht: Es verstärkt sie. Wo vorher ein veraltetes PDF lag, das kaum jemand las, steht jetzt ein Assistent, der dieses PDF mit voller Überzeugung jedem Kunden vorträgt, der fragt. Die Qualität eines Assistenten hat eine Obergrenze, und diese Obergrenze ist Ihre Dokumentation.
Nachdem wir Assistenten mit Wissensdatenbanken aus sehr unterschiedlichen Branchen verbunden haben, sind dies die zehn Probleme, die uns immer wieder begegnen. Nutzen Sie sie als Audit: Wenn Sie mehr als drei ankreuzen, haben Sie Arbeit zu erledigen — vor dem Chatbot (oder parallel dazu).
Die Checkliste
1. Gibt es Widersprüche zwischen Dokumenten?
Der Klassiker: Die Website sagt Rückgabe innerhalb von 30 Tagen, das AGB-PDF sagt 15, und die interne FAQ sagt “mit der verantwortlichen Person klären”. Ein Mensch löst den Widerspruch mit Kontext; eine semantische Suche liefert je nach Formulierung der Frage jede der drei Versionen. Schnelltest: Wählen Sie Ihre fünf wichtigsten Richtlinien und suchen Sie sie in allen Ihren Content-Repositories. Tauchen unterschiedliche Versionen auf, wird der Assistent sie alle servieren.
2. Sind die Inhalte datiert und versioniert?
Ohne Datumsangaben kann niemand (weder Sie, noch der Assistent, noch wer einen Fehler auditiert) wissen, welche Version einer Richtlinie wann galt. Jedes Dokument braucht eine verantwortliche Person, das Datum der letzten Überprüfung und das Datum der nächsten. Das ist langweilig — und es ist der Unterschied zwischen eine Antwort auditieren zu können und es nicht zu können.
3. Wie viel Wissen lebt nur in Köpfen?
Machen Sie diese Übung: Nehmen Sie die letzten 50 Konversationen Ihres Supports und prüfen Sie, wie viele Antworten Ihres Teams in irgendeinem Dokument stehen. Das übliche Ergebnis überrascht: Ein großer Teil des echten Wissens (die Ausnahmen, die seltenen Fälle, das “das machen wir in Wirklichkeit so”) ist nirgendwo dokumentiert. Dieses Tribal Knowledge ist für jede KI unsichtbar. Es zu dokumentieren ist die wertvollste Arbeit dieser ganzen Liste — und niemand kann sie für Sie erledigen.
4. Haben die real häufigen Fragen eine schriftliche Antwort?
Verwandt, aber verschieden: Ihre öffentlichen FAQ beantworten meist die Fragen, die das Marketing gern bekommen würde, nicht die, die der Support bekommt. Die Quelle der Wahrheit dafür, was Ihre Kunden fragen, ist Ihr Ticket-Postfach, nicht Ihre FAQ-Seite. Gleichen Sie beide ab und schreiben Sie, was fehlt.
5. Liegen die Inhalte in verarbeitbaren Formaten vor?
Ein gescanntes PDF, eine Preistabelle als Bild, ein Tutorial-Video ohne Transkript: Für ein Retrieval-System ist all das Rauschen oder Stille. Kritische Inhalte müssen als strukturierter Text existieren (klare Überschriften, ein Thema pro Abschnitt, Tabellen als Tabellen). Wie die Struktur das Retrieval beeinflusst, beschreiben wir auf der Seite zu RAG und Wissensdatenbanken.
6. Gibt es verwaiste oder Zombie-Inhalte?
Handbücher eingestellter Produkte, abgelaufene Aktionen, alte Versionen von Richtlinien, die niemand gelöscht hat. Für die semantische Suche wiegt alles gleich: Eine Aktion von 2023 kann das “ähnlichste” Fragment zur Frage von heute sein. Bevor Sie irgendetwas verbinden, braucht es eine Bereinigung: was gelöscht wird, was außerhalb der Reichweite des Assistenten archiviert wird und was aktualisiert wird.
7. Ist klar, was öffentlich und was intern ist?
In vielen Unternehmen leben im selben Raum die öffentliche Rückgaberichtlinie und die Marge, mit der Ausnahmen verhandelt werden, der Listenpreis und der maximal genehmigte Rabatt. Wenn Sie den Assistenten “mit allem” verbinden, wird er früher oder später einem Kunden etwas Internes vortragen. Die Trennung öffentlich/intern muss in der Quelle existieren, mit einem einfachen Kriterium: Alles, was der Assistent lesen kann, kann er auch sagen.
8. Hat jeder Inhaltsbereich einen Owner?
“Die Dokumentation gehört allen” heißt, dass sie niemandem gehört. Jeder Bereich (Preise, Richtlinien, Produkt, Betrieb) braucht einen Owner mit Namen, der für die Richtigkeit einsteht. Wenn der Assistent versagt (er wird versagen), muss die Frage “Wem gehört dieser Inhalt?” eine sofortige Antwort haben.
9. Existiert ein Aktualisierungsprozess — oder nur guter Wille?
Dokumentation veraltet nicht aus Faulheit, sondern weil das Aktualisieren in keinem Prozess steht: Der Preis wird im System geändert, und niemand hat die Aufgabe, ihn in der Dokumentation zu ändern. Die Regel, die wir unseren Kunden vorschlagen: Keine Änderung an Richtlinie, Preis oder Produkt gilt als abgeschlossen, bis ihr Dokument aktualisiert ist. Ohne das hat jeder Assistent ein Verfallsdatum, wie wir in Warum Chatbots in der Produktion versagen beschreiben.
10. Wissen Sie, welche Fragen keine Antwort haben?
Der letzte und am meisten ignorierte Punkt: Führen Sie eine explizite Liste der Themen, zu denen der Assistent nicht antworten darf (Rechtliches, Medizinisches, Fälle, die einen Menschen erfordern), und der häufigen Fragen, die noch kein Dokument haben. Ersteres definiert den Sicherheitsperimeter; Letzteres ist Ihr nach echter Nachfrage priorisiertes Dokumentations-Backlog.
Die richtige Reihenfolge: Warten Sie nicht auf die 10/10
Die falsche Schlussfolgerung aus dieser Checkliste wäre “erst reparieren wir die ganze Dokumentation, dann kommt der Assistent”. So funktioniert es nicht: Ohne Assistenten gibt es kein Feedback dazu, welche Dokumentation fehlt oder versagt, und das Projekt “Dokumentation reparieren” stirbt nach drei Wochen an Abstraktion.
Die Reihenfolge, die funktioniert, ist die umgekehrte: Der Assistent startet auf einem kuratierten, verlässlichen Teilbestand der Dokumentation (und sei er klein), mit sauber geschlossenem Perimeter und mit zitierten Quellen in jeder Antwort — und was die Kunden fragen, wird genutzt, um zu priorisieren, was als Nächstes dokumentiert wird. Die fehlgeschlagenen Konversationen jeder Woche sind die Dokumentations-Aufgabenliste der nächsten. Nach drei Monaten ist die Wissensdatenbank besser als je zuvor — nicht weil jemand sie abstrakt auditiert hätte, sondern weil jede Lücke von einer echten Frage aufgezeigt wurde.
Dieser Zyklus (fehlgeschlagene Konversationen → Dokumentation → besserer Assistent) ist genau die wiederkehrende Arbeit, die unser KI-Assistent beinhaltet — und der Grund, warum Sie jedem Chatbot-Projekt misstrauen sollten, das mit “laden Sie Ihre Dokumente hoch” beginnt statt mit “schauen wir uns an, was Ihre Kunden fragen”.