Gkc26-Session: Was kommt nach dem KI-Pilot?
Weitere Optionen
Diese Seite ist KI-generiert. Sowohl die Zusammenfassung als auch das zugrundeliegende Transkript der Videoaufzeichnung wurden mithilfe von KI erstellt.
| Was kommt nach dem KI-Pilot? | |
|---|---|
| Art | Barcamp-Session |
| KnowledgeCamp | KnowledgeCamp 2026 |
| Sessiongebende | Stefan Holtel
|
| Datum | 08.10.2026 |
| Zeit | 15:00 bis 15:45 Uhr |
| Raum | KM Academy (3.OG) |
| Sprache | Deutsch |
| Aufzeichnung | YouTube |
| Im Programm | Pretalx |
| KI-Unterstützung | Whisper large-v3 (Transkription), gpt-6.1-sol (Redaktion) |
Aus dem Veranstaltungsprogramm:
KI-Strategie durch kluge Experimente - Scheitern von KI-Betriebsmodellen
Zusammenfassung
In der Barcamp-Session „Was kommt nach dem KI-Pilot?“ stellte Stefan Holtel den gemeinsam mit einem Kollegen entwickelten Ansatz PACE vor. Ausgangspunkt war seine Beobachtung, dass in Organisationen zahlreiche KI-Initiativen, Schulungen und Pilotprojekte stattfinden, daraus aber nicht selbstverständlich ein zusammenhängender organisationaler Nutzen entsteht. Individuelle Produktivitätsgewinne und die Entwicklung der gesamten Organisation seien dabei zu unterscheiden.
PACE steht für Probe, Achieve, Codify, Evolve. Holtel beschrieb den Ansatz nicht als Reifegradmodell oder Abfolge verbindlicher Einführungsschritte, sondern als Entscheidungsdisziplin: Vorhandene, abgeschlossene und geplante KI-Initiativen werden daraufhin untersucht, welche Erkenntnisse sie liefern und welche nächsten Entscheidungen sich daraus begründen lassen. Durch die Verbindung dieser Entscheidungen soll ein kohärentes Portfolio entstehen, aus dem sich eine zur Organisation passende KI-Strategie entwickelt.
Im Mittelpunkt standen zwei Arten von Evidenz: der geschäftliche Nutzen einer Initiative und ihre organisationalen Voraussetzungen und Auswirkungen. Die anschließende Diskussion behandelte den Einstieg in strategisch und hierarchisch geprägte Organisationen, menschliche Kontrolle von KI-Ergebnissen, kulturelle Veränderungsgrenzen und die Frage, wie sich der Austausch zwischen Initiativen entscheidungsorientiert gestalten lässt.
Aufbau und Ausgangsproblem
Holtel gestaltete seinen Input mithilfe eines Chatbots, den er zu einem noch in Arbeit befindlichen, ungefähr 18-seitigen englischsprachigen Whitepaper befragte. Das Dokument diente als roter Faden; statt es vollständig durchzugehen, ließ er zentrale Ideen zusammenfassen und erläuterte diese anhand von Beispielen. Rückfragen und Einwürfe waren ausdrücklich vorgesehen. Zu Beginn stellte er auch zur Diskussion, ob andere die beschriebene Problemlage überhaupt teilten.
Die englische Fassung begründete er sowohl mit der Arbeit für seinen Arbeitgeber als auch mit seiner Einschätzung, dass englische Fachbegriffe bei Chatbots eine bessere inhaltliche Verarbeitung unterstützen könnten.
Seine zentrale Kritik richtete sich gegen die Erwartung, mehr Werkzeuge, mehr Schulungen oder eine formulierte KI-Strategie führten automatisch zu wirksamer Veränderung. Nach seiner Darstellung investieren Organisationen erheblich in KI, ohne ausreichend zu untersuchen, was aus den einzelnen Aktivitäten tatsächlich folgt. Schulungen würden teilweise bereits als Abschluss der KI-Einführung behandelt.
Holtel führte diese Schwierigkeit auf die Besonderheiten von KI als Allzwecktechnologie zurück. Ihre Einführung betreffe nicht nur Technik, sondern zugleich Arbeitsweisen, Verantwortung, Wissen und Entscheidungen. Methoden, die sich an einer klassischen Softwareeinführung orientieren, hielt er deshalb für unzureichend. Große Organisationen seien zudem auf Stabilität und berechenbare Abläufe ausgerichtet; die für KI erwartete Veränderungsdynamik stehe dazu in Spannung.
PACE als Entscheidungsdisziplin
Vier Zwecke statt einer Reifegradleiter
Holtel ordnete KI-Initiativen in vier Felder ein:
- Probe: Etwas systematisch ausprobieren, um Unsicherheit zu verringern und zu lernen, was funktioniert oder nicht funktioniert.
- Achieve: Auf einen konkreten Nutzen beziehungsweise ein überprüfbares Ergebnis hinarbeiten.
- Codify: Erkenntnisse und Vorgehensweisen so aufbereiten, dass sie für weitere Teile der Organisation nutzbar werden.
- Evolve: Eine längerfristige, nachhaltige Entwicklung der Organisation verfolgen.
Die Felder beruhen auf zwei Unterscheidungen: unmittelbarer gegenüber nachhaltigem Wert sowie zielorientiertem gegenüber mittel- und erfahrungsorientiertem Vorgehen. Den zweiten Gegensatz erläuterte Holtel mit der Effectuation-Theorie. Während ein zielorientierter Ansatz zunächst ein gewünschtes Ergebnis festlegt und anschließend die erforderlichen Mittel sucht, beginnt Effectuation mit vorhandenen Mitteln und den dadurch möglichen nächsten Schritten.
Besonders wichtig war ihm die Trennung von Lernen und Leistungserbringung. Wer ausprobiert, um Unsicherheit zu reduzieren, verfolgt einen anderen Zweck als jemand, der eine festgelegte Produktivitätssteigerung erreichen soll. Eine Erprobung könne deshalb auch dann sinnvoll sein, wenn sie Grenzen oder ungeeignete Einsatzmöglichkeiten sichtbar mache.
Die vier Felder seien keine Stufen, die jede Initiative nacheinander durchlaufen müsse. Aus einem Versuch könne eine neue Initiative hervorgehen, etwa zur breiteren Überprüfung eines Nutzens. Ebenso seien weitere Erprobung, Kodifizierung, Zusammenlegung oder Beendigung möglich. Entscheidend sei die Begründung des jeweiligen nächsten Schritts.
Von vorhandenen Initiativen zur Strategie
Dem üblichen Schema „Strategie – Roadmap – Initiativen – Ergebnisse“ stellte Holtel eine andere Logik gegenüber: Ausgangspunkt sind die real vorhandenen Aktivitäten. Diese werden ausgewertet, miteinander verbunden und zur Grundlage weiterer Entscheidungen gemacht.
Dabei unterschied er zwei Blickrichtungen:
- Forensisch: Vergangene oder laufende Initiativen nachträglich untersuchen: Was ist geschehen, was wurde gelernt und welche Fragen bleiben offen?
- Prospektiv: Künftige Initiativen so gestalten, dass sie auf vorhandenen Erkenntnissen aufbauen oder gezielt verbleibende Unsicherheit reduzieren.
Organisationen müssten dafür nicht bei null anfangen. Auch unzureichend dokumentierte oder enttäuschend verlaufene Vorhaben könnten Lernmaterial liefern. Relevant sei, ob die Erfahrungen für weitere Entscheidungen genutzt würden.
Eine Strategie werde in diesem Verständnis an tatsächlichen Entscheidungen sichtbar: Welche Aktivitäten erhalten Ressourcen? Was wird fortgesetzt, verbunden oder eingestellt? Welche Entscheidungen bleiben aus? Aus wiederholten, aufeinander bezogenen Entscheidungen könne ein Portfolio entstehen, dessen Entwicklung sich nachvollziehbar erzählen lasse.
Holtel unterschied dabei zwischen Kontrolle und Steuerung. Die Dynamik vieler paralleler Aktivitäten lasse sich nicht vollständig kontrollieren. Verbindungen, Aufmerksamkeit und Ressourcen könnten jedoch beeinflusst werden. PACE solle hierfür eine Entscheidungsarchitektur bieten.
Geschäftlicher Nutzen und organisationale Evidenz
Für jede Initiative unterschied Holtel zwei Betrachtungsebenen:
- Business-Evidenz: Welche wirtschaftlichen oder leistungsbezogenen Ergebnisse sind erkennbar?
- Organisationale Evidenz: Passt die Veränderung zur Organisation, welche Anpassungen erfordert sie und besteht die Bereitschaft dazu?
Eine positive Kennzahl reiche demnach nicht als Begründung für eine breite Einführung. Ebenso müsse untersucht werden, welche Folgen eine Initiative für Aufgaben, Verantwortung, Zusammenarbeit und Akzeptanz habe.
Mit dem Begriff der kulturellen Decke bezeichnete Holtel Grenzen dessen, was eine Organisation unter ihren bestehenden Bedingungen entscheiden und verändern kann. Diese Grenzen würden auch an ausbleibenden Entscheidungen sichtbar. Dabei gehe es nicht allein um Zustimmung des Vorstands: Entscheidungen entstünden auf unterschiedlichen Ebenen, teilweise auch ohne ausdrückliche Entscheidung übergeordneter Stellen.
Das Sichtbarmachen solcher Grenzen verstand er zunächst als Klärung, nicht als Vorwurf. Wenn notwendige Veränderungen nicht gewollt seien, könne dies erklären, warum ein Vorhaben nicht weiterkomme. Daraus könne auch folgen, keine weitere Energie hineinzustecken. Zugleich könne die erkennbare Grenze zum Ausgangspunkt eines Veränderungsangebots werden.
Beispiele aus einem Versicherungsszenario
Zeitgewinn und Skalierungsentscheidung
Zur Konkretisierung nutzte Holtel ein Beispiel einer „Horizon Insurance“. Darin wurden unter anderem Schadenbearbeitung, Kundendienst und Underwriting betrachtet.
Bei der Bearbeitung eines Vorgangs sei die Dauer im Beispiel von 23 auf 18 Minuten gesunken. Holtel fragte, ob dieser Zeitgewinn bereits eine Skalierung rechtfertige. Mögliche Nebenwirkungen blieben in einer solchen Kennzahl unsichtbar: Beschäftigte könnten Verantwortung verlieren oder ihre Arbeit als weniger interessant erleben. Auswirkungen, die im kleinen Versuch kaum auffielen, könnten bei einer größeren Einführung relevant werden.
Außerdem problematisierte er die Messung von KI-Geschwindigkeit ohne Berücksichtigung nachgelagerter Prüfung. In einem von ihm berichteten Beispiel sei eine durch einen KI-Agenten erzeugte Tabelle als schnell erstellt und fehlerfrei präsentiert worden. Wie lange die fachliche Kontrolle gedauert habe, sei jedoch nicht beantwortet worden. Für die Nutzenbewertung müsse nach seiner Argumentation die gesamte Prozesslaufzeit betrachtet werden, nicht nur die Erzeugungszeit.
Erfahrungswissen wiederverwendbar machen
Ein weiteres Beispiel betraf die Frage, wie das Wissen erfahrener Underwriter anderen zugänglich gemacht werden könne. Holtel ordnete dieses Anliegen dem Zweck Codify zu.
Er warnte vor der Erwartung, langjähriges Erfahrungswissen vollständig in einen Chatbot übertragen zu können. Aus seiner Sicht würden dabei bekannte Schwierigkeiten des Wissensmanagements erneut auftreten. Chatbots könnten Teile der Wissenserfassung unterstützen, ersetzten aber nicht die Untersuchung dessen, was sich überhaupt erfassen und zuverlässig weiterverwenden lasse.
Damit werde die Frage zugleich zu einer Risikomanagementaufgabe: Welche Tätigkeiten dürfen einem System übertragen werden, und welches menschliche Wissen muss verfügbar bleiben? Holtel führte hierzu Unternehmensgeschichten als Warnbeispiele für den Verlust benötigten Wissens an. Seine übergreifende Frage lautete, ob Organisationen aus solchen Erfahrungen lernen und dieses Lernen in spätere Entscheidungen übertragen.
Diskussion
Einstieg in strategieorientierte Organisationen
In der Diskussion wurde eingewandt, dass gerade größere Organisationen Budgets häufig aus vorgegebenen Strategien ableiten. Gefragt wurde, wie aufnahmefähig sie für den umgekehrten, von vorhandenen Initiativen ausgehenden Weg seien.
Holtel antwortete, sein Ansatz setze keinen einzelnen zentralen Auftraggeber voraus. Ein Einstieg könne im Vorstand, in einem Fachbereich oder in einem kleinen Team liegen. Entscheidend seien vorhandene Handlungsmöglichkeiten, Ressourcen und die Bereitschaft, eine konkrete Entscheidungssituation zu bearbeiten.
Die Organisationsstruktur sei ihm deshalb nicht gleichgültig. Er suche nach wirksamen Ansatzpunkten, könne sich diese aber nicht immer aussuchen. Ein externer Blick könne Verbindungen zwischen Aktivitäten erkennen, die intern getrennt wahrgenommen würden. Daraus könnten weitere Kooperationen entstehen, ohne dass von Beginn an Verantwortung für eine umfassende Transformation übernommen werde.
Denken, Prüfung und Vertrauen
Ein weiterer Diskussionsstrang betraf die Sorge, dass Menschen durch KI weniger selbst nachdenken und Ergebnisse seltener hinterfragen könnten.
Holtel stellte die verbreitete Formel infrage, am Ende entscheide immer ein Mensch. Nach seiner Einschätzung würden KI-Ergebnisse unter Arbeits- und Zeitdruck bereits ohne vollständige Prüfung übernommen. Er beschrieb dies als Übergang zu einer risikobasierten Vertrauensentscheidung: Nutzende schätzten ab, wie wahrscheinlich ein Fehler sei und welches Risiko sie akzeptieren könnten.
Auch die eigene Nutzung ordnete er so ein. Vertrautheit mit einem Fachgebiet helfe ihm, die Richtung einer Antwort einzuschätzen. In unbekannten Domänen fehle dagegen das Erfahrungswissen zur zuverlässigen Beurteilung. Kritisches Denken bleibe relevant, beseitige diese fachlichen Grenzen aber nicht.
Kulturelle Grenzen und strukturierter Austausch
Auf die Frage, ob eine sichtbar gemachte kulturelle Grenze irgendwann durch eine ambitionierte Zielstrategie überwunden werden müsse, verwies Holtel auf die notwendige Veränderungsbereitschaft. Das Aufzeigen einer Grenze führe nicht automatisch dazu, dass eine Organisation sie verändern wolle. Beratung könne die Konsequenzen verdeutlichen und Unterstützung anbieten, die Entscheidung aber nicht abnehmen.
Zum Abschluss wurde gefragt, ob vor allem mehr Austausch zwischen den bestehenden KI-Initiativen nötig sei. Holtel hielt bloßes Miteinanderreden für unzureichend. Er empfahl, Treffen durch konkrete Auswertungs- und Entscheidungsfragen zu strukturieren:
- Was sollte die Initiative klären, und was wurde tatsächlich herausgefunden?
- Welche Fragen sind beantwortet, welche bleiben offen?
- Wo bearbeiten andere Projekte dieselben Unsicherheiten?
- Welche nächste Entscheidung ergibt sich daraus?
Dazu brauche es Personen, die die Komplexität anerkennen, Zusammenhänge erkennen und passende Beteiligte verbinden. Holtel betonte die Bedeutung einer sorgfältigen Moderation und einer realistischen Einschätzung des jeweils Möglichen.
Wichtigste Erkenntnisse
- PACE wurde als noch in Entwicklung befindlicher Ansatz vorgestellt, nicht als belegtes Erfolgsmodell.
- Der nächste Schritt nach einem KI-Pilot soll aus dessen Erkenntnissen begründet werden; Skalierung ist nur eine mögliche Entscheidung.
- Geschäftliche Ergebnisse und organisationale Auswirkungen müssen gemeinsam betrachtet werden.
- Strategie entsteht in Holtels Modell durch verbundene Entscheidungen über reale Initiativen.
- Austausch wird erst dann steuerungswirksam, wenn er offene Fragen, gemeinsame Lernbedarfe und konkrete Entscheidungen sichtbar macht.