Eine Demo ist eine Aufführung. Sie ist einstudiert, sie läuft auf ausgewählten Daten, und sie existiert, um Ihre Skepsis in eine Unterschrift zu verdichten. Nichts davon macht Anbieter unehrlich – eine gute Demo eines guten Systems ist eine legitime Sache –, aber es bedeutet, dass die Demo nicht der Beweis sein kann. Die MIT-Forschung von 2025 zu Unternehmens-KI fand die gescheiterten 95 % der Piloten genau um diese Lücke gruppiert: Tools, die in kontrollierten Vorführungen funktionierten und dann im Echtbetrieb weder Kontext halten noch sich anpassen noch integrieren konnten.
Die Korrektur ist nicht Zynismus. Es ist ein besserer Fragenkatalog. Die zehn Fragen unten folgen grob dem Verlauf eines Verkaufsgesprächs, und zu jeder beschreiben wir die Antwort, die ein seriöser Umsetzungspartner gibt – und die Antwort, die das Meeting beenden sollte. Bringen Sie die Liste mit. Ein Anbieter, der sie übelnimmt, hat Ihnen damit etwas Nützlicheres gesagt als die Demo.
„Was ist das schriftliche Erfolgskriterium – und was passiert, wenn wir es verfehlen?"
Die diagnostisch stärkste Frage des ganzen Fachs. Ein seriöser Partner antwortet mit einer Zahl, einer Messmethode, einem Zeitfenster und einer Konsequenz – reduzierte Vergütung, Nachbesserung, eine Ausstiegsklausel. Eine Demo-Agentur antwortet mit Funktionen. Steht das Ergebnis nicht schriftlich fest, kaufen Sie Bemühung, kein Resultat.
„Was kostet uns dieser Prozess heute – und wie messen Sie das vor dem Bau?"
Die richtige Antwort beschreibt ein Audit: Prozesserfassung, Ausgangsmessung, ein Dokument, das Sie behalten, ob Sie weitermachen oder nicht. Die falsche Antwort springt direkt zum Bau – was bedeutet, dass die „Verbesserung" an nichts gemessen wird und damit unwiderlegbar ist.
„Zeigen Sie mir das im Betrieb in einem System wie unserem – nicht in einer Demo-Umgebung."
Die Demo läuft auf kuratierten Daten in einer sauberen Sandbox. Ihr Unternehmen läuft auf einem bestimmten ERP, einer bestimmten Buchhaltungssoftware und fünfzehn uneinheitlichen Lieferantenformaten. Fragen Sie, wie der Integrationspfad in Ihre führenden Systeme aussieht – namentlich. Ein Tool, das in einem separaten Tab lebt, ist ein Tool, das Ihr Team in der ersten vollen Woche aufgibt.
„Was passiert, wenn das System unsicher ist oder danebenliegt?"
Jedes automatisierte System liegt manchmal daneben. Eine seriöse Antwort beschreibt Konfidenzschwellen, Prüfschleifen mit Menschen, Rückfallpfade und wie Fehler erkannt und korrigiert werden. Eine Antwort, die auf „es ist sehr genau" hinausläuft, bedeutet: Die Fehlerbehandlung wurde nicht entworfen – und sie wird später entworfen, von Ihnen, im Echtbetrieb.
„Wer wartet das nach dem Go-live, zu welchen Kosten – und was bringt es zum Brechen?"
Schnittstellen ändern sich, Formate driften, Modelle werden aktualisiert. Die ehrliche Antwort enthält wiederkehrende Kosten und benennt die fragilen Stellen. Ein Angebot ohne Wartungsposition hat die Wartung nicht beseitigt; sie hat sie als Notfall terminiert.
„Welche Ihrer Kunden darf ich anrufen – auch einen, bei dem es schiefging?"
Vom Anbieter ausgesuchte Referenzen beweisen wenig; zwei zufriedene Kunden hat jeder. Die aufschlussreiche Bitte ist die zweite Hälfte. Ein Partner, der seinem Umgang mit Problemen vertraut, stellt den Kontakt zu einem Kunden her, dessen Projekt Turbulenzen hatte. Ein Anbieter, bei dem noch nie etwas schiefging, ist entweder brandneu oder redigiert.
„Wer genau wird an unserem Projekt arbeiten – und wie viele Umsetzungen wie unsere hat diese Person selbst gemacht?"
Die Menschen im Verkaufsgespräch sind oft nicht die Menschen, die liefern. Fragen Sie nach Namen. In einem so jungen Fach ist „persönlich abgeschlossene Umsetzungen" ein faireres Zeugnis als jede Logo-Wand – und bedenken Sie: In einem so schnell wachsenden Markt sind die meisten Agenturen jünger als die Rechnungen, die sie verarbeiten.
„Was brauchen Sie von unserem Team – in Stunden, und wann?"
Die verführerische Antwort – „nichts, wir übernehmen alles" – ist die falsche. Echte Integration braucht Ihre Leute: den Prozess dokumentieren, Grenzfälle testen, Ausnahmen entscheiden. Ein Partner, der Ihren internen Aufwand beziffert, plant ein echtes Projekt. Ein Anbieter, der ihn erlässt, plant eine Übergabe der Schuld.
„Was passiert mit unseren Daten – wohin gehen sie, wofür werden sie genutzt, und was verlangt der AI Act von uns als Betreiber?"
Die Antwort sollte benennen, wo Daten verarbeitet werden, ob damit irgendjemandes Modelle trainiert werden und wie Ihre Pflichten als Betreiber aussehen – ohne die Verordnung abzutun oder sie zur Angstwaffe zu machen. Ein Anbieter, der 2026 die tatsächlichen Anforderungen des EU AI Act nicht besprechen kann, reicht Ihr Compliance-Risiko stillschweigend an Sie zurück.
„Was sollten wir nicht automatisieren?"
Der letzte Filter – und der menschlichste. Ein Partner mit Urteilsvermögen wird Prozesse in Ihrem Unternehmen benennen, für die Automatisierung verfrüht ist – undokumentierte Abläufe, ermessenslastige Entscheidungen, Stellen, an denen der Ausgangszustand ungemessen ist. Ein Anbieter, für den alles automatisierbar ist, verkauft keine Dienstleistung. Er verkauft alles – und das ist dasselbe, wie nichts zu verstehen.
Was die zehn Fragen gemeinsam haben
Zurückgelesen ist die Liste eine Frage in zehn Kostümen: Macht dieser Anbieter Aussagen, die sich überprüfen lassen? Schriftliche Kriterien, Ausgangsmessungen, benannte Integrationen, Fehlerpfade, Wartungskosten, Referenzen mit Ecken und Kanten, benannte Personen, bezifferter Aufwand, konkrete Compliance-Aussagen und erklärte Grenzen – jeder Punkt verwandelt ein Versprechen in etwas Falsifizierbares. Die MIT-Forschung fand das Nutzervertrauen am schnellsten bei Tools zusammenbrechen, deren versprochene Ergebnisse nie überprüft wurden.
Eine abschließende Anmerkung der Fairness: Ein Anbieter, der alle zehn Fragen gut beantwortet, hat sich auch etwas von Ihnen verdient – einen erfassten Prozess, ehrlichen Datenzugang und tatsächlich zugesagte interne Zeit. Überprüfung ist eine beidseitige Disziplin. Das ist es, was einen Einkauf von einer Partnerschaft unterscheidet.
Häufig gestellte Fragen
Was sind die größten Warnsignale bei der Wahl eines KI-Automatisierungsanbieters? Kein schriftliches Erfolgskriterium, keine Ausgangsmessung vor dem Bau, keine Wartungskosten im Angebot, Referenzen nur von handverlesenen zufriedenen Kunden – und die Behauptung, Ihr Team müsse keine Zeit investieren. Jedes davon wird später zu einem Projekt, das sich weder bewerten noch am Leben halten lässt.
Sollte ein KI-Anbieter Ergebnisse garantieren? Ein seriöser Partner verpflichtet sich auf ein schriftliches, messbares Erfolgskriterium mit Konsequenzen bei Verfehlung. Pauschale ROI-Garantien, bevor Ihr Prozess erfasst und gemessen wurde, sind ein Verkaufsinstrument, keine Zusage.
Wie bewerte ich eine Anbieter-Demo? Behandeln Sie die Demo als Behauptung, nicht als Beweis. Verlangen Sie den Ablauf auf Daten und Systemen wie Ihren, fragen Sie, was bei Unsicherheit des Systems passiert, und fragen Sie, welche Integrationspunkte in Ihre bestehende Software im genannten Preis enthalten sind.
Welche Fragen zeigen, ob eine Agentur wirklich liefern kann? Fragen Sie, wer die Arbeit persönlich machen wird und wie viele vergleichbare Umsetzungen diese Person abgeschlossen hat; bitten Sie um ein Gespräch mit einem Kunden, dessen Projekt Probleme hatte; und fragen Sie, was man in Ihrem Unternehmen nicht automatisieren würde. Konkrete Antworten zeigen Erfahrung, universelle Begeisterung zeigt Marketing.
Quellen: MIT NANDA, „The GenAI Divide: State of AI in Business 2025" (2025), zu den Mustern des Scheiterns zwischen Demo und Echtbetrieb und zur Vertrauenserosion um unüberprüfte Versprechen. Die zehn Fragen sind Arkhons eigene Methodik; wir freuen uns, wenn man sie uns alle stellt.
