Warum Agentenprogramme beim Piloten ins Stocken geraten

Das Muster ist häufig genug, um vorhersehbar zu sein. Ein Pilot läuft gut, die Führung ist zufrieden, ein Rollout wird angekündigt und acht Monate später sind dieselben drei Agenten im Einsatz, und sonst hat sich nichts bewegt.

Niemand beschließt aufzuhören. Das Programm schreitet einfach nicht voran, und wenn man sich die Gründe dafür anschaut, ist es selten das, was jemand erwartet hat.

Der Pilot wurde als Erfolg ausgewählt

Piloten werden in der Regel aufgrund ihrer Nachweisbarkeit ausgewählt: eine klar definierte Aufgabe, saubere Daten, ein enthusiastisches Team, ein Champion, der Zeit übrig hat.

Im zweiten Anwendungsfall fehlt alles davon. Die Daten sind chaotisch, der Prozess ist umstritten, das Team ist beschäftigt und niemand hat freie Kapazitäten, um sich darum zu kümmern. Der Pilot bewies, dass die Technologie unter günstigen Bedingungen funktioniert, was nie eine offene Frage war.

Das zweite gehört niemandem

Der Pilot hatte einen Champion. Der Rollout hat Programm. Ein Programm hat keinen Eigentümer, und Agenten ohne benannten Eigentümer werden nicht gewartet, sodass die zweite Welle eintrifft, ohne dass innerhalb von sechs Monaten jemand dafür verantwortlich ist.

Dies ist der zuverlässigste Prädiktor, den wir sehen. Nicht die Wahl des Modells, nicht das Budget, nicht die Raffinesse: ob jeder Agent eine Person hat, deren Name beigefügt ist.

Qualität wurde nach Gefühl beurteilt

In einem Pilotprojekt liest eine Person, die die Domäne versteht, die Ausgabe und beurteilt sie. Das funktioniert bei einem Agenten und überlebt nicht bei zehn, weil die Aufmerksamkeit nicht skaliert und Meinungsverschiedenheiten über die Qualität keinen Schiedsrichter haben.

Ohne schriftliche Kriterien und automatische Bewertung benötigt jeder neue Agent auf unbestimmte Zeit einen menschlichen Prüfer, und das Programm ist durch die Anzahl der Prüfer begrenzt, die Sie haben. Teams, die während des Pilotprojekts Bewertungen geschrieben haben, durchlaufen dies. Teams, die nicht erkannt haben, dass Skalierung eine Skalierungsüberprüfung bedeutet.

Die Kosten wurden genau im falschen Moment sichtbar

Die Pilotausgaben sind so gering, dass niemand danach fragt. Die Ausgaben für die Einführung fallen nicht an, und die Frage stellt sich in dem Quartal, in dem das Programm Kosten verursacht und nur wenige abgeschlossene Ergebnisse aufweist.

Wenn die Ausgaben nicht jedem Agenten zugeordnet werden, gibt es keine Antwort. „KI hat uns so viel gekostet“ lädt zu einer Entscheidung über KI im Allgemeinen ein, die fast immer eine Entscheidung zur Verlangsamung ist. „Dieser Agent kostet dies und produziert dies“ lädt zu einer Entscheidung über diesen Agenten ein, bei dem es sich um die gewünschte Konversation handelt.

Die Organisation hat nie entschieden, wozu sie dienen soll

Der am wenigsten technische Grund und der häufigste. Ein Pilotprojekt kann erfolgreich sein, ohne dass sich jemand über das Ziel einig ist, denn das Ziel bestand darin, zu sehen, ob es funktioniert. Ein Programm kann das nicht.

Teams, die ins Stocken geraten sind, konnten im Allgemeinen nicht beantworten, wie der Erfolg in einem Jahr aussehen würde. Teams, die skalierten, hatten bis dahin etwas Bestimmtes, wenn auch Bescheidenes: diese Arbeitskategorie, so viel davon, in dieser Qualität.

Was diejenigen, die durchkommen, gemeinsam haben

Namensnennung pro Agent und einem namentlich genannten Eigentümer ab dem ersten Tag. Schriftliche Bewertungskriterien vor dem Bau. Budgets, die eher blockieren als warnen. Ein zweiter Anwendungsfall, der eher aus Gründen der Repräsentativität als der Nachweisbarkeit ausgewählt wurde. Und ein erklärtes Ziel, das spezifisch genug ist, um sich zu irren.

Nichts davon ist anspruchsvoll. All dies ist vor der Ausbreitung einfacher zu installieren als danach.

Als nächstes

Auf den Seiten des Agent Orchestration System werden Eigentum, Zuordnung, Budgets und Bewertung behandelt. Wenn Sie lieber ein bestimmtes Programm besprechen möchten, als sich über das Muster zu informieren, buchen Sie eine Demo und bringen Sie die Einschränkungen mit.