RAG-Chatbot

Ein Chatbot, der aus Ihren Dokumenten antwortet

Ein RAG-Chatbot beantwortet Fragen von Kunden oder Mitarbeitenden auf Basis Ihrer eigenen Unterlagen. Mit Quellenangabe, ohne gepflegte Dialogbäume und mit Betrieb in der EU.

Was einen RAG-Chatbot von klassischen Chatbots unterscheidet

Viele Unternehmen haben schlechte Erfahrungen mit Chatbots gemacht. Die alten Systeme folgten festen Entscheidungsbäumen und reagierten nur auf vorhergesehene Fragen. Alles andere endete bei „Das habe ich leider nicht verstanden“.

Ein RAG-Chatbot funktioniert grundlegend anders. Er sucht bei jeder Frage in Ihrer Wissensbasis nach den passenden Textstellen und lässt ein Sprachmodell daraus eine Antwort formulieren. Wie das technisch abläuft, erklären wir unter Was ist ein RAG-System?

Regelbasierter ChatbotKI-Chat ohne Ihre DatenRAG-Chatbot
Versteht freie FragenKaumJaJa
Kennt Ihre Produkte und RegelnNur was jemand eingepflegt hatNeinJa, aus Ihren Dokumenten
QuellenangabeNeinNeinJa
PflegeaufwandHoch, jeder Dialog von HandKeiner, aber unkontrolliertGering, Dokumente aktualisieren genügt
Risiko erfundener AntwortenGeringHochGering, mit klaren Regeln

Intern oder extern: zwei Arten von RAG-Chatbots

Interner Assistent für Ihr Team

Mitarbeitende fragen nach Richtlinien, Produktdetails, Vertragsklauseln oder Wartungsanleitungen. Der Chatbot läuft in Microsoft Teams, im Intranet oder als Web-Anwendung und übernimmt die Zugriffsrechte Ihrer Quellen. Mehr dazu unter KI-Wissensmanagement.

Kunden-Chatbot auf Ihrer Website

Kundinnen und Kunden stellen Fragen zu Produkten, Lieferbedingungen oder Bedienung. Der Chatbot antwortet ausschließlich aus freigegebenen, öffentlichen Inhalten und übergibt an einen Menschen, wenn er nicht weiterweiß. Das entlastet den Service, ohne dass Kunden in einer Sackgasse landen.

Was gute Antworten ausmacht

  • Saubere Wissensbasis. Veraltete Preislisten oder widersprüchliche Handbücher führen zu falschen Antworten. Deshalb beginnt jedes Projekt mit der Datenaufbereitung.
  • Klare Grenzen. Der Chatbot antwortet nur zu Themen, für die er Quellen hat, und sagt ehrlich, wenn nicht.
  • Quellen sichtbar. Jede Antwort verweist auf das Dokument, damit Nutzer nachprüfen können.
  • Tonalität. Sie legen fest, ob der Chatbot siezt oder duzt, wie ausführlich er antwortet und in welchen Sprachen.
  • Laufende Auswertung. Unbeantwortete und schlecht bewertete Fragen zeigen, wo nachgebessert werden muss.

So entsteht Ihr RAG-Chatbot

  1. Erstgespräch. Zielgruppe, typische Fragen und gewünschter Einsatzort.
  2. Datencheck. Welche Dokumente beantworten diese Fragen, und in welchem Zustand sind sie?
  3. Pilot. Aufbau mit einer begrenzten Wissensbasis und Tests mit echten Fragen aus Ihrem Alltag.
  4. Livegang und Betrieb. Einbindung in Website, Teams oder Intranet, Monitoring und laufende Pflege.

Die technische Seite beschreibt unser Leitfaden RAG-System aufbauen.

Häufige Fragen zum RAG-Chatbot

Was ist ein RAG-Chatbot?
Ein Chatbot, der seine Antworten nicht aus allgemeinem KI-Wissen oder vorgefertigten Dialogbäumen holt, sondern bei jeder Frage in Ihren Dokumenten sucht und daraus eine Antwort mit Quellenangabe formuliert.
Worin unterscheidet sich ein RAG-Chatbot von einem klassischen Chatbot?
Klassische Chatbots arbeiten mit festen Regeln und vorab geschriebenen Antworten. Sie scheitern, sobald eine Frage anders gestellt wird als vorgesehen. Ein RAG-Chatbot versteht frei formulierte Fragen und antwortet aus dem aktuellen Stand Ihrer Unterlagen, ohne dass jemand Dialoge pflegen muss.
Kann ein RAG-Chatbot auf unserer Website für Kunden laufen?
Ja. Dann beschränken wir die Wissensbasis auf öffentlich freigegebene Inhalte wie Produktdaten, Handbücher und FAQ. Interne Dokumente bleiben getrennt und sind für den öffentlichen Chatbot nicht erreichbar.
Was passiert, wenn der Chatbot keine Antwort weiß?
Er sagt es. Auf Wunsch leitet er die Frage an einen Menschen weiter, etwa per E-Mail oder Ticket. Diese offenen Fragen zeigen Ihnen außerdem, wo Ihre Dokumentation Lücken hat.
Läuft der Chatbot auch in Microsoft Teams?
Ja. Für interne Assistenten ist Teams oft der beste Ort, weil Ihr Team dort ohnehin arbeitet. Alternativ binden wir den Chat ins Intranet oder als eigene Web-Oberfläche ein.

Welche Fragen soll Ihr RAG-System beantworten?

In 30 Minuten klären wir Anwendungsfall, Datenlage und den sinnvollsten ersten Schritt. Kostenlos und ohne Verkaufsdruck.