Eine Checkliste zur Bewertung einer Agentenplattform

Die meisten Evaluierungsprozesse, die wir sehen, wenden achtzig Prozent ihres Aufwands für die Demo auf und zwanzig für alles andere. Dieses Verhältnis ist rückläufig, da die Demo der Teil ist, den jeder seriöse Anbieter einstudiert hat.

Hier ist die Liste, die wir verwenden würden.

Zuordnung und Kosten

Können Sie die Ausgaben pro Agent anzeigen, nicht pro Arbeitsbereich oder pro Monat? Aufgeschlüsselt nach Benutzer und Modell? In Währung statt in Token gemeldet?

Können Sie pro Team ein Limit festlegen, das blockiert statt warnt, und eine Prognose für den Rest des Zyklus sehen?

Wenn die Antwort auf die erste Frage „Nein“ lautet, bedeutet die Kostenkontrolle auf dieser Plattform, dass im Nachhinein eine Rechnung gelesen wird.

Eigentum und Lebenszyklus

Hat jeder Makler einen namentlich genannten Eigentümer, der Eigentum des Maklers ist, oder handelt es sich dabei um eine Konvention, die der Kunde in einer Tabelle einhalten muss?

Was passiert mit einem Makler, dessen Besitzer das Unternehmen verlässt? Gibt es irgendetwas im System, das einen Agenten bemerkt, den seit sechs Monaten niemand berührt hat?

Verwaiste Agenten sind der stille Kostenfaktor jedes Programms, und Plattformen unterscheiden sich enorm darin, ob sie sie sichtbar machen.

Durchsetzung von Richtlinien

Wo wird eine Grenze erzwungen: in der Eingabeaufforderung, in der Orchestrierungsebene oder an der Stelle, an der die Aktion stattfindet?

Dies ist die Frage, bei der die Unterschiede zwischen den Anbietern am größten sind und die sich am einfachsten vage beantworten lässt. „Der Agent wird angewiesen, dies nicht zu tun“ ist keine Durchsetzung. Fragen Sie, was die Aktion physisch verhindert.

Wie gelangen die Anmeldedaten zum Agenten? Wenn die Antwort darin besteht, dass der Agent ein Geheimnis hat, fragen Sie, wie ein Widerruf aussieht.

Bewertung

Kann die Ausgabe automatisch anhand der von Ihnen definierten Kriterien bewertet werden, und zwar bei jedem Durchlauf und nicht anhand einer Stichprobe?

Kann ein Lauf angehalten werden, wenn eine Prüfung fehlschlägt, oder wird beim Scoring nur ein Bericht erstellt, den jemand später liest?

Decken die Kriterien neben der Korrektheit auch Kosten und Latenz ab oder nur die Korrektheit? Eine Plattform, die die Kosten optimiert, ohne die Qualität zu bewerten, wird Ihr System billiger und schlechter machen.

Prüfung

Wird jede Agentenaktion aufgezeichnet oder eine Stichprobe? Kann es exportiert werden? Beinhaltet es, worauf der Agent zurückgegriffen hat, und nicht nur, was er getan hat?

Wenn eine Aufsichtsbehörde fragen würde, warum vor elf Monaten eine bestimmte Produktion produziert wurde, was würden Sie ihr antworten?

Bereitstellung und Beendigung

Kann es innerhalb Ihrer Infrastruktur, in Ihrer eigenen Cloud, vollständig Air-Gap ausgeführt werden? Ist die Governance in diesen Modi identisch oder reduziert?

Und das, was die Leute überspringen: Wie sieht ein Abschied aus? Können Sie Ihre Daten und Ihre Agentendefinitionen in einer weiterhin nutzbaren Form exportieren? Eine Plattform, die Sie nicht verlassen können, ist eher eine Abhängigkeit als eine Wahl.

Fragen über uns

Es wäre uns lieber, wenn Sie diese direkt fragen. Wir trainieren nicht anhand Ihrer Daten. Die Verarbeitung erfolgt standardmäßig in der EU und kann angepinnt werden. Die Governance ist identisch: selbstgehostet und Air-Gaped. Unsere Liste der Unterauftragsverarbeiter ist auf Anfrage erhältlich und wir benachrichtigen Sie, bevor wir einen Unterauftragsverarbeiter hinzufügen, der personenbezogene Daten verarbeitet.

Wo wir schwächer sind: Ein isolierter Einsatz kann nicht von allem profitieren, was vom Gesamtverhalten abhängt, und der Air-Gap-Betrieb verändert die Art und Weise, wie Support und Diagnose funktionieren. Beide sind praktikabel und es lohnt sich, sie im Voraus zu kennen, anstatt sie zu entdecken.

Als nächstes

Das Trust Center deckt Compliance, Unterauftragsverarbeiter und Sicherheitsberichte ab. Beschaffungsfragebögen können an contact@capconsultor.eu gesendet werden.