Welche Kennzahlen zeigen, ob sich ein KI-Projekt wirtschaftlich lohnt?
Kurz gesagt
Wirtschaftlich aussagekräftig sind Kennzahlen, die Produktivität, Qualität und Kosten gemeinsam abbilden – etwa Kosten pro akzeptiertem Ergebnis, kostenbewertete Fehlerquote und monetarisierte freie Kapazität. Reine Aktivitätskennzahlen wie Nutzungsquote oder Lizenzzahl sagen dagegen nichts über den tatsächlichen wirtschaftlichen Erfolg aus.
Warum Geschwindigkeit allein keine Produktivität ist
Ein zentraler Grundsatz der Wirtschaftlichkeitsmessung lautet: Jeder Produktivitäts-Kennwert braucht mindestens einen Qualitäts- und einen Risiko-Kennwert, sonst wird Geschwindigkeit durch mehr Fehler, Homogenität oder Kontrollverlust erkauft. Für Softwareentwicklung zählen deshalb auch spätere Defekte und Wartungsaufwand, für Kundenservice Wiederkontakte und falsche Zusagen, für wissensbasierte Systeme die Quellenrichtigkeit, für Recruiting Fairness und Rechtmäßigkeit, für Agenten mit Handlungsbefugnis Fehlaktionen und nötige Interventionen.
KPI-Bereiche im Überblick
Eine belastbare KPI-Bibliothek deckt mehrere Bereiche gleichzeitig ab:
- Produktivität und Zeit: Output je bezahlter Stunde, Netto-Cycle-Time (von Start bis akzeptiertem Abschluss, nicht nur Brutto-Generierungszeit)
- Qualität: kostenbewertete Fehlerquote, Fehler je 1.000 Fälle nach Schwere klassifiziert
- Durchsatz: abgeschlossene Fälle je Periode
- Kapazität: monetarisierte, frei werdende Stunden
- Adoption: aktive, geeignete Nutzung – nicht bloße Lizenzaktivierung
- Review: Prüfaufwand je Output, gemessen in Minuten und Eskalationsquote
- Stückkosten: Kosten pro akzeptiertem Ergebnis, einschließlich Modell, Integration, Review und Fehlerkosten
- Umsatz: inkrementeller Deckungsbeitrag, nicht Bruttoumsatz
- Service: First Contact Resolution als Anteil ohne Wiederkontakt
- Entwicklung: qualitätsadjustierte abgeschlossene Aufgaben, ergänzt um langfristige Wartungskosten
- Wissen: quellenrichtige Antwortquote statt reiner Antwortplausibilität
- Risiko: Expected Loss als Eintrittswahrscheinlichkeit mal Schadenshöhe
- Finanzen: Kapitalwert und Amortisationsdauer
- Mensch: Kompetenzerhalt, also Leistung ohne KI-Unterstützung als Gegenprobe
- Betrieb: Verfügbarkeit, Ausfallminuten und erfolgreiche Übergaben an den Fallback-Prozess
- Portfolio: erwarteter Kapitalwert im Verhältnis zum eingesetzten Kapital
Acht Designregeln für belastbare KPIs
- Jede Kennzahl braucht eine eindeutige Einheit, Population, Datenquelle und Berechnungsregel.
- Produktivität wird als qualitätsadjustierter Output pro Input gemessen, nicht als reiner Mengendurchsatz.
- Primäre und sekundäre Kennzahlen werden vor Pilotstart festgelegt, nicht nachträglich passend ausgewählt.
- Durchschnitt, Verteilung und kritische Segmente werden gemeinsam ausgewiesen, nicht nur der Mittelwert.
- Nutzung wird nicht als finanzieller Erfolg behandelt, sondern als Frühindikator.
- Fehler werden nach Schwere und Folgekosten klassifiziert, nicht in einer einzigen Fehlerquote zusammengefasst.
- Kapazitäts-, Cash- und nicht monetäre Effekte bleiben strikt getrennt.
- Alle Kennzahlen erhalten ein Aktualitätsdatum und eine benannte verantwortliche Person.
Warum Adoption die falsche Erfolgsmessung ist
Nutzungsquote, Zahl der Lizenzen und Anzahl der Piloten sind Aktivitätskennzahlen – sie zeigen, dass etwas passiert, nicht, ob es sich lohnt. Sie sind als Frühindikatoren nützlich, aber nur, wenn parallel Output, Qualität, Kosten und tatsächliche Cash-Wirkung gemessen werden. Ein Unternehmen kann eine hohe Nutzungsquote und trotzdem keinen belastbaren wirtschaftlichen Effekt haben, wenn niemand die zweite Hälfte der Kette misst.
Stop-Kriterien statt endlosem Weiterlaufen
Ein KPI-System ist nur wirksam, wenn vorab klare Abbruchkriterien definiert sind: Der Nettoeffekt nach Review unterschreitet die vorab festgelegte Mindestschwelle. Ein Qualitäts- oder Risikogrenzwert wird verletzt, selbst wenn dabei Zeit gespart wird. Der geeignete Fallanteil oder die aktive Nutzung ist zu klein für den Fixkostenblock. Eine regelbasierte oder Standardsoftware-Alternative erzielt denselben Wert günstiger. Skalenkosten, Governance oder Integrationsaufwand zerstören den ursprünglich positiven Pilot-Kapitalwert.