04 · MEASURE

AI Agent Outcome & Value Check

Forecast ist nicht Actual. Messen Sie nach dem Go-live, was die AI tatsächlich geliefert hat: erfolgreiche Outcomes, Cost to Serve, menschlichen Restaufwand, Business KPIs und realisierten Wert.

IST-WERTEERFOLGREICHE ERGEBNISSESTÜCKKOSTENBEREITSTELLUNGSKOSTENBUSINESS-KPIsWERTREALISIERUNG

→

Verbrauchseinheiten messen Kosten. Erfolgreiche Outcomes messen Wert.Verbinden Sie Consumption und Cost to Serve mit dem fachlichen Ergebnis. Produktivitätswert, Cash-Wirkung und Business KPIs bleiben bewusst getrennt.

AI Agent Economics Toolkit

1DECIDE · Decision & Readiness

→

2DESIGN · Use Case & Solution Advisor

→

3FORECAST · Cost Calculator

→

4MEASURE · Outcome & Value

Review aufsetzen

Use Case

Review-Zeitraum in Monaten

Forecast aus dem Calculator ist eine Monatsbasis und wird automatisch auf diesen Zeitraum hochgerechnet.

Bezeichnung des Reviews

Optionaler Name. Actuals müssen denselben Zeitraum abdecken.

Was ist ein erfolgreicher Outcome?

Definieren Sie die Werteinheit vor dem Review so konkret, dass Forecast und Actual dieselbe Bedeutung haben.

Primäre Value-Dimension

Orientierung für die Business-KPIs; keine automatische Bewertung.

Business Owner

Review-Datum

Mindestqualität (Quality Floor)

Wird aus dem Advisor übernommen, falls vorhanden. Sonst hier vor der Bewertung festlegen – sie ist der Maßstab für Right-Sizing.

Freigabe der Mindestqualität durch

Wer sollte mitdenken? Business Owner · Fachbereich / Antragsteller · FinOps und Lizenzmanagement · Maker / Agent Builder

Forecast übernehmen

Quelle: Diese Werte sollten aus Ihrem AI Agent Cost Calculator oder dem freigegebenen Business Case kommen. Netto-Zeitersparnis bedeutet bereits nach Fehlversuchen und menschlicher Nacharbeit.

Forecast = Monatsbasis × 1 Monat.

Vorgänge im Zeitraum

Forecast Erfolgsquote %

Runs / Vorgang

Forecast wirtschaftliche AI-Kosten €

Cost to Serve gemäß Calculator: Lizenz/Capacity + Consumption/PAYG + laufender Betrieb/Plattform. Menschlicher Restaufwand bleibt separat und fließt zusätzlich in den fully loaded CPO ein.

Forecast Nacharbeit h

Teilmenge des menschlichen Restaufwands: zusätzliche Arbeit durch Fehlversuche/Korrekturen.

Forecast menschlicher Restaufwand h

Gesamter menschlicher Aufwand mit Agent, inkl. Review/Nacharbeit soweit modelliert.

Forecast Netto-Zeitersparnis h

Stundenwert €

Gilt für Forecast und Actual, damit nur die realisierten Stunden verglichen werden.

Forecast Cash-Nutzen €

Nur tatsächlich geplante budgetwirksame Wirkung.

Wer sollte mitdenken? FinOps und Lizenzmanagement · Business Owner · Finance / Controlling

Actuals erfassen

Tatsächliche Vorgänge

Erfolgreiche Outcomes

Tatsächliche Runs / Vorgang

Tatsächliche wirtschaftliche AI-Kosten €

Dieselbe Cost-to-Serve-Definition wie Forecast: Lizenz/Capacity + Consumption/PAYG + laufender Betrieb/Plattform.

Tatsächliche Nacharbeit h

Teilmenge des menschlichen Restaufwands.

Tatsächlicher menschlicher Restaufwand h

Gesamter menschlicher Aufwand mit Agent; gleiche Definition wie Forecast.

Tatsächliche Netto-Zeitersparnis h

Realisierter Cash-Nutzen €

Nur budgetwirksam realisierte Wirkung.

Fehlversuche / Retries

Optional. Im Review wird zusätzlich der Anteil Retries / Vorgänge gezeigt.

Tatsächlich genutztes Modell / Routing

Das tatsächlich produktiv genutzte Modell bzw. Routing – nicht nur das ursprünglich geplante Startmodell.

Mindestqualität (Quality Floor) erreicht?

Bewerten Sie gegen die vor dem Pilot definierte Mindestqualität. Modellwechsel werden nicht automatisch empfohlen, sondern als kontrollierter Vergleich geprüft.

Wer sollte mitdenken? FinOps und Lizenzmanagement · Agent Owner · Betrieb / Support · Fachbereich / Antragsteller

Business Outcomes messen

Was hat die AI zurückgegeben? Definieren Sie bis zu drei fachliche KPIs, z. B. Umsatz, Durchsatz, Geschwindigkeit, Qualität oder eine neue Fähigkeit. So bleibt AI Value mehr als nur „gesparte Stunden“.

KPI	Richtung	Baseline	Ziel	Actual	Einheit	Fortschritt zum Ziel
						–
						–
						–

Wer sollte mitdenken? Business Owner · Fachbereich / Antragsteller · Prozessverantwortliche · Finance / Controlling

Forecast vs. Actual

Forecast Cost per successful outcome–

Actual Cost per successful outcome–

Forecast fully loaded CPO–

AI-/Plattformkosten + menschlicher Restaufwand

Actual fully loaded CPO–

Actual Erfolgsquote–

Wirtschaftliche AI-Kosten Actual–

Unit Economics · Wert pro erfolgreichem Outcome

Forecast

Produktivitätswert / Outcome–

Forecast Zeitwert ÷ erwartete erfolgreiche Outcomes · kein Cash

Cash-Nutzen / Outcome–

Geplanter budgetwirksamer Nutzen ÷ erwartete erfolgreiche Outcomes

Netto-Value / Outcome–

(Forecast Produktivitätswert − wirtschaftliche AI-Kosten) ÷ erwartete erfolgreiche Outcomes · kein Cash

Actual

Produktivitätswert / Outcome–

Actual Zeitwert ÷ erfolgreiche Outcomes · kein Cash

Cash-Nutzen / Outcome–

Budgetwirksam realisierter Nutzen ÷ erfolgreiche Outcomes

Netto-Value / Outcome–

(Actual Produktivitätswert − wirtschaftliche AI-Kosten) ÷ erfolgreiche Outcomes · kein Cash

Forecast Value

Produktivitätswert–

Cash-Nutzen–

Nacharbeit–

Runs gesamt–

Actual Value

Produktivitätswert–

Realisierter Cash-Nutzen–

Nacharbeit–

Runs gesamt–

Value Realization

Produktivitätswert realisiert–

Actual Zeitwert ÷ Forecast Zeitwert

Cash-Nutzen realisiert–

Actual Cash ÷ Forecast Cash

Netto-Value–

Produktivitätswert minus wirtschaftliche AI-Kosten. Kein Cash.

Cash nach AI-Kosten–

Realisierter Cash-Nutzen minus wirtschaftliche AI-Kosten.

Review-Fokus

Geben Sie Forecast und Actuals ein. Die Review-Hinweise entstehen automatisch.

Wichtig: Produktivitätswert ist nicht automatisch Cash. Ein Agent kann Zeit freisetzen und fachliche Outcomes verbessern, ohne dass dadurch unmittelbar eine budgetwirksame Einsparung entsteht.

Review-Entscheidung dokumentieren

Vom Ergebnis zur Entscheidung: Dokumentieren Sie bewusst, ob der Use Case skaliert, beibehalten, optimiert oder gestoppt werden soll. Der Check trifft diese Entscheidung nicht automatisch.

Entscheidung

Nächster Review

Verantwortlich

Nächste Maßnahme

Entscheidungsnotiz

Wer sollte mitdenken? Business Owner · Fachbereich / Antragsteller · FinOps und Lizenzmanagement · Finance / Controlling · Agent Owner

Methodik: Tokenomics Foundation · Production / Consumption / Value. Der Check verbindet Cost to Serve, erfolgreiche Outcomes und realisierten Business Value. Microsoft-USL/UBB-Kontext aus dem Calculator wird nur als Kostenkontext übernommen; die Value-Bewertung bleibt plattformneutral. Model-Right-Sizing folgt dem FinOps-Prinzip, Kosten-/Qualitäts-Trade-offs sichtbar zu machen und die Modellwahl regelmäßig neu zu prüfen. Szenariorechnung und Review-Hilfe, keine Finanz-, Bilanzierungs- oder Investitionsberatung. Alle Forecast- und Actual-Werte müssen sich auf denselben Betrachtungszeitraum beziehen.

Tokenomics Mindmap FinOps Foundation · AI Model Selection Microsoft USL / UBB Copilot Cost Management