Den ROI eines KI-Agenten messen, ohne sich zu täuschen
Die meisten ROI-Zahlen für Agenten überstehen keine genaue Lektüre, und der Grund ist fast immer derselbe: die Baseline wurde nachträglich rekonstruiert und die Fehler blieben außen vor.
Eine ehrliche Zahl ist nicht schwer, muss aber vor dem Start beginnen. Schreiben Sie auf, was heute kostet, in den Einheiten, die Sie später verwenden. Alles Weitere folgt aus dieser einen Disziplin.
Zuerst die Baseline notieren#
- Volumen: wie oft passiert diese Aufgabe pro Woche?
- Bearbeitungszeit: wie lange braucht ein Mensch — gemessen an einer Stichprobe, nicht erinnert?
- Vollkosten pro Stunde der Bearbeitenden.
- Heutige Qualität: Fehler- oder Nacharbeitsquote, denn daran wird der Agent gemessen.
- Wartezeit: wie lange wartet die anfragende Person heute, falls das zählt.
Eine nachträglich rekonstruierte Baseline begünstigt immer das Projekt, und jede prüfende Person weiß das.
Kennzahlen, die halten, und solche, die schmeicheln#
| Schmeichelnde Kennzahl | Warum sie täuscht | Stattdessen |
|---|---|---|
| Deflection-Rate | Zählt Unbeantwortetes als gelöst | Ohne Menschen abgeschlossene Aufgaben |
| Bearbeitete Nachrichten | Volumen ist kein Wert | Ende zu Ende abgeschlossene Aufgaben |
| Zufriedenheit in Agentenchats | Survivor Bias | Zufriedenheit über alle Kontakte |
| Gesparte Zeit pro Antwort | Ignoriert Prüfzeit | Nettominuten nach menschlicher Prüfung |
| Kosten pro Token | Keine Geschäftszahl | Kosten pro abgeschlossener Aufgabe |
Die Formel samt weggelassenem Teil#
Jahresnutzen gleich ohne Menschen abgeschlossene Aufgaben mal gesparte Minuten je Aufgabe mal Vollkosten je Minute — minus Kosten der vom Agenten verursachten Fehler, minus die erzeugte Prüfzeit. Diese Subtraktion ist der ehrliche Teil. Ein Agent, der 70 % erledigt, aber jede Ausgabe prüfen lässt, hat Prüfzeit gespart, nicht Bearbeitungszeit — meist Faktor drei Unterschied.
Schätzen Sie Fehlerkosten explizit, auch grob: Korrekturzeit plus Goodwill plus erstattete Beträge.
Nutzen, der real ist, aber nicht auf der Rechnung steht#
Manches erscheint nie im Kostenmodell: schnelle Antworten um drei Uhr nachts; Konsistenz unabhängig davon, wer Dienst hat; ein schriftlicher Trace, warum etwas entschieden wurde — in regulierten Umgebungen viel wert; Mitarbeitende, die Zeit für die interessante Hälfte haben. Berichten Sie das getrennt und ehrlich, statt es in erfundene Währung umzurechnen.
Wenn die ehrliche Antwort nein lautet#
Manchmal sagt die Rechnung stopp, und das auszusprechen ist das Wertvollste an der Übung. Volumenschwache Aufgaben amortisieren einen Bau selten. Aufgaben, deren Ausgaben ohnehin geprüft werden müssen, sparen nur Prüfzeit. Und Aufgaben mit teuren Fehlern können selbst bei hoher Genauigkeit negativ ausfallen — 3 % falsch bei zehntausend wertvollen Entscheidungen sind dreihundert Probleme. Veröffentlichen Sie auch dieses Ergebnis.
Häufige Fragen
Welche Abschlussquote ist realistisch?
Sechzig bis achtzig Prozent einer gut abgesteckten, volumenstarken Aufgabe, der Rest eskaliert. Wer 95 % verspricht, bevor er Ihre Daten gesehen hat, beschreibt einen Benchmark.
Wie lange bis zur Amortisation?
Bei gut gewählter interner Aufgabe und vernünftigem Volumen üblicherweise sechs bis zwölf Monate inklusive Wartung. Zeigt Ihr Modell sechs Wochen, prüfen Sie, ob Fehlerkosten und Prüfzeit enthalten sind.
Wie zähle ich Nutzen, wenn der Agent nur entwirft?
Messen Sie die Zeit vom leeren Blatt bis zur freigegebenen Ausgabe, vorher und nachher. Entwerfende Agenten liefern oft den Großteil der Ersparnis bei einem Bruchteil des Risikos.
ki agent roiki wert messenautomatisierung amortisationdeflection kennzahlki business case
