Was eine KI-Potenzialanalyse konkret liefert
Der Agentensystem-Test übersetzt diffuse KI-Ideen in prüfbare Entscheidungen. Er zeigt, welcher Ablauf zuerst betrachtet wird, welche Daten und Personen beteiligt sind, wo Ausnahmen auftreten und woran ein Pilot gemessen werden kann. Das Ergebnis ist eine Entscheidungsunterlage; produktive Zugriffe oder Integrationen sind noch nicht Teil der Analyse. Die Stärke des Agentensystem-Tests liegt in seiner Reduktion auf das Wesentliche: Statt eine umfassende KI-Strategie zu entwickeln, konzentriert er sich auf den einen Prozess, der die größte Wahrscheinlichkeit für einen erfolgreichen Pilot hat.
- Prozesskarte mit Start, Schritten, Ergebnis und Verantwortlichen
- Hebelrechnung mit dokumentierter Ausgangsbasis und Annahmen
- Daten-, Risiko- und Freigabekarte für den gewählten Ablauf
- Pilot-Scope mit Testfällen, Abnahmekriterien und Abbruchkriterium
- Empfehlung für Umsetzung, Vorarbeit oder bewusstes Nicht-Starten
Nach welchen Kriterien Prozesse priorisiert werden
Ein guter Einstieg ist nicht automatisch der sichtbarste oder technisch spektakulärste Anwendungsfall. Priorisiert wird ein wiederkehrender Ablauf mit klarer Eingabe, bekanntem Ergebnis, zugänglichen Daten und einer fachlich verantwortlichen Person. Hohe Risiken, viele ungeklärte Ausnahmen oder fehlende Messwerte senken die Pilot-Eignung. Ein Prozess, der täglich stattfindet, klare Regeln hat und von einer Fachperson getestet werden kann, ist auch dann vorzuziehen, wenn er weniger aufregend klingt als ein vollautonomer KI-Agent.
- Wiederholung – Häufiger, stabiler Ablauf – Seltene Einzelfallarbeit
- Daten – Benannte Quellen und Rechte – Unklare Herkunft oder fehlende Zugänge
- Regeln – Erklärbare Regeln und Ausnahmen – Entscheidung nur als Bauchgefühl
- Risiko – Reversible Entwürfe und Freigaben – Schwer reversible autonome Aktion
- Messbarkeit – Ist-Wert und Zielkennzahl vorhanden – Nutzen nur als allgemeine Hoffnung
- Verantwortung – Fachliche Person für Test und Abnahme – Niemand entscheidet bei Ausnahmen
So läuft der DAB Agentensystem-Test ab
Zuerst werden Ziel und Prozessgrenze festgelegt: Was soll erreicht werden, und wo endet der betrachtete Ablauf? Danach folgen Ausgangsbasis, Quellen, Rollen, Ausnahmen und Schutzbedarf. Mehrere Kandidaten werden anhand derselben Kriterien verglichen. Für den bestgeeigneten Prozess entsteht ein begrenzter Pilot-Scope mit realistischen Testfällen und einer klaren nächsten Entscheidung. Diese Struktur soll das Risiko einer endlosen Ideensammlung oder einer Priorisierung ohne dokumentierte Prüfung verringern.
- 1. Ziel, Prozessgrenze und verantwortliche Person benennen
- 2. Ist-Aufwand, Daten, Ausnahmen und Risiken dokumentieren
- 3. Kandidaten nach Nutzen, Machbarkeit und Messbarkeit vergleichen
- 4. Pilot, notwendige Vorarbeit oder Nicht-Start begründen
Welche Prozesse häufig gute Kandidaten sind
Geeignet sind Abläufe, bei denen Informationen wiederholt gesammelt, geprüft, strukturiert oder als Entwurf vorbereitet werden. Beispiele sind Anfrage-Routing, Terminvorbereitung, Dokumentenerfassung, Angebotsvorbereitung, Wissenssuche oder regelmäßiges Reporting. Die Eignung hängt trotzdem vom konkreten System- und Datenweg ab. Ein Prozess, der in der Theorie gut klingt, kann in der Praxis scheitern, wenn die Datenqualität mangelhaft ist, die Schnittstellen instabil arbeiten oder keine fachliche Person für die Abnahme zur Verfügung steht.
Wann eine KI-Potenzialanalyse bewusst abrät
Ein verantwortungsvoller Agentensystem-Test kann zu dem Ergebnis kommen, dass ein Prozess zuerst standardisiert, Datenqualität verbessert oder Zuständigkeit geklärt werden muss. Auch hochkritische Entscheidungen ohne kontrollierbaren Fehlerweg sind kein guter Pilot. Eine negative Empfehlung kann unnötige Budget- und Kapazitätsbindung begrenzen und ist deshalb ein vollständiges Ergebnis. Sie schafft Klarheit über Voraussetzungen und Risiken, ohne den Erfolg eines späteren Projekts zu versprechen.
- Kein konkreter Ablauf oder kein fachlicher Prozesseigner
- Ungeklärte Datenrechte, Zugriffe oder Anbieterrollen
- Keine Testfälle und keine messbare Ausgangsbasis
- Vollautonome Entscheidung ist zwingend, obwohl Fehler schwer reversibel wären
Warum der Agentensystem-Test auch für bewährte Prozesse wertvoll ist
Selbst bei vorhandener Automatisierungserfahrung kann ein strukturierter Agentensystem-Test zusätzlichen Kontext liefern. Abläufe wachsen häufig organisch; dabei können Ausnahmen, informelle Zwischenschritte und nicht dokumentierte Regeln entstehen, die nur wenige Mitarbeitende kennen. Ein Agentensystem-Test macht solches implizites Wissen sichtbarer und schafft eine dokumentierte Grundlage für Erweiterungen. Er hilft außerdem, Voraussetzungen vor der Übertragung eines erfolgreichen Musters auf andere Bereiche erneut zu prüfen.
- Implizites Wissen sichtbar machen: Was machen erfahrene Mitarbeitende intuitiv richtig?
- Dokumentation schaffen: Verlässliche Grundlage für Erweiterung und Wissenstransfer
- Kontext prüfen: Erfolgreiche Patterns nicht unkritisch auf andere Prozesse übertragen
- Risiken erkennen: Ausnahmen, die bisher selten, aber kritisch waren
Fallstricke bei der Datenauswertung vermeiden
Selbst gute Prozessdaten können zu falschen Schlüssen führen, wenn der Kontext fehlt. Häufige Fehler sind: Ausreißer werden als Normalfall übernommen; manuelle Zwischenschritte werden ignoriert, weil sie nicht digital erfasst sind; die Qualität der Eingaben wird nicht hinterfragt; oder die Verbesserung wird nur an einer einzigen Kennzahl gemessen, während Nebenwirkungen unbeobachtet bleiben. Eine belastbare Auswertung dokumentiert deshalb nicht nur die Zahlen, sondern auch deren Grenzen, mögliche Verzerrungen und offene Fragen.
- Ausreißer und Sondereffekte separat betrachten, nicht in den Durchschnitt einrechnen
- Manuelle, informelle oder nicht erfasste Zwischenschritte sichtbar machen
- Eingangsqualität prüfen: Schlechte Daten produzieren auch mit KI schlechte Ergebnisse
- Mehrere Kennzahlen beobachten, um Nebenwirkungen und Verschiebungen zu erkennen
- Unsicherheit offenlegen: Was ist belegt, was ist Vermutung?
Wie der Messweg schon vor dem Start festgelegt wird
Ein Pilot ohne Messweg ist ein Experiment ohne Ergebnis. Deshalb wird bereits im Agentensystem-Test festgelegt: welche Kennzahl den Erfolg definiert; wie der Ist-Wert vor dem Start erhoben wird; in welchem Rhythmus und mit welcher Methode während des Pilots gemessen wird; wer die Daten sammelt und wer sie prüft; und welcher Unterschied als relevant gilt. Wenn diese Punkte nicht geklärt sind, wird der Pilot verschoben, bis eine belastbare Messung möglich ist.
- Primärkennzahl: Die eine Zahl, an der der Pilot gemessen wird
- Ist-Erfassung: Wie und von wem wird der Ausgangswert dokumentiert?
- Messrhythmus: Wie oft wird während des Pilots gemessen und ausgewertet?
- Verantwortung: Wer sammelt, wer prüft, wer entscheidet bei Unklarheit?
- Relevanzschwelle: Welcher Unterschied ist für eine Weiterentscheidung ausreichend?
Wann der Zeitpunkt für eine Potenzialanalyse ideal ist
Die beste Zeit für eine Potenzialanalyse ist, bevor Budget freigegeben oder Tools gekauft werden. Sie eignet sich auch dann, wenn mehrere Abteilungen gleichzeitig KI-Ideen haben, aber keine gemeinsame Priorität existiert. Ein weiterer guter Zeitpunkt ist nach der ersten erfolgreichen Automatisierung, wenn das Unternehmen prüfen möchte, welcher weitere Prozess den größten Hebel bietet. Weniger geeignet ist eine Analyse, wenn bereits ein Tool gekauft wurde und nun nach Anwendungsfällen gesucht wird – dann steht die Technik im Mittelpunkt statt des Geschäftsprozesses.
- Vor Budgetfreigabe: Prozesse priorisieren, bevor Gelder gebunden werden
- Bei konkurrierenden Ideen: Gemeinsame Entscheidungsgrundlage für mehrere Bereiche
- Nach erstem Erfolg: Systematische Auswahl des nächsten Prozesses statt Zufall
- Kritisch: Nach Tool-Kauf die Analyse nutzen, um eingekaufte Technik zu rechtfertigen
Was nach dem Agentensystem-Test separat entschieden wird
Analyse, Pilot, Ausbau und Betrieb sind getrennte Stufen. Nach dem Agentensystem-Test kann das Unternehmen einen Pilot beauftragen, interne Vorarbeit erledigen, einen anderen Anbieter wählen oder nicht starten. Umfang, Preis, Eigentum, Hosting, Wartung und Übergabe werden erst für die konkrete nächste Stufe verbindlich vereinbart. Diese Trennung kann das Risiko einer voreiligen langfristigen Bindung verringern und unterstützt eine bewusste Entscheidung auf Basis der Analyse-Ergebnisse.
Häufige Fragen
Antworten auf die wichtigsten Fragen zur Entscheidung und zum nächsten sicheren Schritt.
- Was ist der Unterschied zwischen KI-Potenzialanalyse und KI-Workshop? – Ein Workshop kann Wissen und Ideen erzeugen. Eine Potenzialanalyse bewertet konkrete Prozesse nach einheitlichen Kriterien und endet mit dokumentierter Priorität, Risiken, Messweg und nächster Entscheidung. Beides kann kombiniert werden, sollte aber nicht verwechselt werden. Ein Workshop ohne anschließende strukturierte Bewertung bleibt oft bei der Ideensammlung stehen; eine Potenzialanalyse ohne vorherige Workshop-Phase kann wichtigen Kontext und Team-Commitment vermissen.
- Wie viele Prozesse werden im Agentensystem-Test betrachtet? – Genug, um eine begründete Priorität zu bilden, aber nicht so viele, dass die Analyse oberflächlich wird. Der genaue Umfang wird vorab vereinbart und richtet sich nach Bereichen, Datenlage und verfügbaren Fachpersonen. In der Regel werden zwischen drei und fünf Prozesse betrachtet, um eine aussagekräftige Rangfolge zu erstellen, ohne die Analyse zu sehr zu verzögern.
- Brauchen wir bereits saubere Prozessdokumentation? – Nein, aber eine fachliche Person muss den realen Ablauf, typische Ausnahmen und gewünschte Ergebnisse erklären können. Fehlende Dokumentation wird sichtbar gemacht; sie kann Teil der notwendigen Vorarbeit werden. In der Praxis ist die fachliche Expertise der Mitarbeitenden oft wertvoller als eine formale Prozessdokumentation, solange die relevanten Informationen während des Agentensystem-Tests strukturiert erfasst werden.
- Ist nach der Analyse eine Umsetzung verpflichtend? – Nein. Der Agentensystem-Test ist eine eigenständige Entscheidungsstufe. Pilot, Ausbau und Betrieb werden separat angeboten und entschieden.
- Kann das Ergebnis auch gegen KI sprechen? – Ja. Wenn Standardisierung, klassische Automatisierung oder organisatorische Klärung geeigneter sind, sollte die Empfehlung das benennen. Ziel ist ein tragfähiger Prozess, nicht der Einsatz von KI um jeden Preis.
Offizielle Orientierung und Prüfgrenzen
Fachlich geprüft von Jan Sommershoff, Automatisierungsberater und Geschäftsführer. Stand: 2026-09-17. Die Quellen beweisen weder den Nutzen eines einzelnen Projekts noch die rechtliche Konformität eines konkreten Systems. Rechtsberatung ist nicht Teil der Leistung.