Wie gut ist Ihr Chatbot wirklich?
Speed, Antwort-Qualität, DSGVO, UI: eine Note 0-10 mit Side-by-Side-Vergleich zu bis zu drei Konkurrenten. Plus konkrete Verbesserungen, die wirklich was bringen.
Was prüft der Chatbot-Quality-Check?
4 Dimensionen, gewichtet nach Impact auf Ihre Conversion.
Speed (30 %)
P50-Latenz erste-Antwort über 8 Test-Fragen. Studien (Forrester, Salesforce 2026): Bots über 3 s verlieren 47 % der User vor der zweiten Frage.
Antwort-Qualität (40 %)
5 universelle + 3 branchen-spezifische Fragen. LLM-Evaluator (OpenRouter Gemma 4) bewertet Relevanz, Faktentreue, Halluzinationsfreiheit.
DSGVO (15 %)
5 DOM-Checks: Cookie-Banner, Privacy-Link, AVV-Hinweis, EU-Hosting, EU AI Act §50 Disclosure (ab 02.08.2026 Pflicht).
Bedienbarkeit (15 %)
Mobile-Responsive, ARIA-Labels, Close-Button, Conversation-History, nicht-aufdringliches Branding. DOM + Mobile-Viewport-Simulation.
4 Dimensionen × 8 Test-Fragen = 1 Score von 0-10
Die meisten Chatbot-Vergleiche im Netz testen entweder die Anbieter (Tidio vs Intercom vs HubSpot) oder den Funktions-Umfang. Beides nützlich, aber nicht das, was Kunden tatsächlich erleben.
Was Kunden erleben: Wie schnell antwortet der Bot? Versteht er meine Frage? Halluziniert er? Ist er DSGVO-konform? Genau diese vier Dimensionen messen wir bei jedem Scan, auf Ihrer Site und auf Ihren Konkurrenten-Sites side-by-side.
Der Score ist eine Note, kein Audit.Eine 4/10 heißt nicht "Verstoß gegen DSGVO", sondern "im DSGVO-Block haben Sie die Hälfte der Best-Practices noch offen". Ein 8.5/10 heißt nicht "perfekt", sondern "deutlich über DACH-KMU-Schnitt (5.8)".
Warum 4 Layer? Weil Speed allein nichts wert ist, wenn die Antwort falsch ist. Und Accuracy nichts wert ist, wenn der Bot nach 8 Sekunden antwortet. Und beides nichts wert ist, wenn die DSGVO-Behörde anklopft. Layer-Gewichtung: Speed 30 % · Accuracy 40 % · DSGVO 15 % · UI 15 %.
Drei Gründe, warum Chatbot-Quality 2026 wichtiger wird als je zuvor
1. EU AI Act tritt in Kraft (Artikel 50, August 2026)
Jeder Chatbot, der mit EU-Bürgern interagiert, muss klar als KI erkennbar sein. Strafen: bis 3 Prozent Jahresumsatz. Tools wie Tidio Standard-Setup erfüllen das nicht out-of-the-box. Wir prüfen den Hinweis im Score.
2. Customer-Erwartungen verschieben sich
ChatGPT hat das Bar gesetzt: Antworten in <1 Sekunde, sprachlich elegant, faktisch korrekt. Wer 2026 noch mit Standard-Tidio (3-4 s, generische Antworten) arbeitet, fällt hörbar zurück. Studien zeigen: 60-80 Prozent der Standard-Anfragen könnten automatisiert werden, wenn der Bot gut genug ist. Bei DACH-KMU sind aktuell nur 25-40 Prozent automatisiert.
3. KMU-fähige Custom-LLM-Lösungen sind erschwinglich geworden
Was 2023 noch ein 50.000-€-Enterprise-Projekt war, kostet 2026 ab 49 €/Monat. RAG-Setup (Bot kennt Ihre FAQs/Produkte/AGB) liefert ab Tag 1 Mehrwert. B01 AI-Consultant-Chatbot von Bot-Agent: 49-149 €/Monat, Setup 99-299 € (BAFA-fähig).
Konkurrenten-Vergleich: Sehen, wo Sie stehen
Sie können bis zu drei Konkurrenten-URLs angeben. Wir scannen jede identisch zu Ihrer Site: gleiche 8 Fragen (5 universal + 3 aus Ihrer Branche), gleiche Scoring-Formel.
Das Ergebnis ist eine Side-by-Side-Tabelle plus ein automatisch generierter Insight: "Konkurrent A erreicht 8.2/10, Sie 4.4/10. Hauptunterschied: Custom-LLM mit RAG vs Standard-Tidio."
Warum das wertvoll ist: Sie wissen nicht nur, wo Sie stehen, sondern auch, was die besseren Konkurrenten anders machen. Plus: der Vergleich ist screenshot-fähig (LinkedIn, Slack), erzeugt zweite-Klicks und virale Loops.
Hinweis: Wir scannen sequenziell, nicht parallel, um Rate-Limits der Fremd-Widgets nicht zu verletzen. Mit drei Konkurrenten dauert ein Scan ca. 90 Sekunden.
B01 AI-Consultant-Chatbot, ab 49 €/Monat netto
Custom-LLM mit Ihrem FAQ-Wissen. Antworten unter 1 Sekunde. EU-DSGVO und AI Act ready. Setup in 3-5 Tagen. Multi-Channel (Web + WhatsApp + Telegram). Score-Schnitt im Audit-Test: 8.7/10.
Häufige Fragen (FAQ)
Antworten auf die häufigsten Fragen zum Chatbot-Quality-Check.
Bot-Agent-ChatbotCheck/1.0 im User-Agent, und respektieren robots.txt. Das gleicht einem manuellen Test eines neugierigen Kunden, nur strukturierter.Glossar: Chatbot-Begriffe verstehen
Die wichtigsten Fachbegriffe zu Chatbot-Qualität, RAG und EU AI Act.
tidioChatApi), das das Chat-Symbol einbindet und User-Interaktion handhabt. Detection läuft via Signaturen dieser Libraries.