실제로 중요한 수준을 갖춘 상담사 운영 성숙도 모델

성숙도 모델은 일반적으로 채택된 기술의 사다리입니다. 가시성이 없는 기능은 우리가 가장 자주 보는 실패를 낳기 때문에 더 유용한 버전은 답할 수 있는 질문의 사다리입니다.

여기에 우리가 관찰하는 사다리가 있습니다.

1단계: 뭔가 작동함

에이전트가 존재하고 유용한 작업을 수행합니다. 일반적으로 한 명의 열성적인 사람이 빌드하고 출력을 읽어 평가하며 어딘가의 구성 파일에 있는 자격 증명을 사용하여 실행됩니다.

대답할 수 없는 질문: 이 사람이 떠나면 어떻게 될까요?

거의 모든 조직이 어느 시점에 여기에 있으며 여기에 있는 데 아무런 문제가 없습니다. 실패 횟수가 늘어나는 동안 여기에 머물게 됩니다.

2단계: 존재하는 것이 무엇인지 알고 있습니다.

재고가 있습니다. 모든 에이전트에는 명명된 소유자가 있습니다. 실행 중인 항목을 나열하고 각 항목의 책임자를 말할 수 있습니다.

이제 귀하가 대답할 수 있는 질문은 다음과 같습니다. 우리는 무엇을 운영하고 있으며 이에 대해 누구에게 물어봐야 합니까?

이는 사다리에서 가장 높은 가치를 지닌 단일 단계이며, 새로운 기능을 생성하지 않기 때문에 가장 자주 건너뛰는 단계입니다. 또한 조기에 수행하는 것이 가장 저렴하고 개조하는 것이 가장 고통스럽습니다.

3단계: 비용이 얼마인지 알 수 있습니다.

지출은 상담원별로 계산되며 사용자와 모델별로 분류되어 통화로 보고됩니다. 경고하기보다는 예산을 차단합니다.

이제 대답할 수 있는 질문은 이 에이전트가 비용만큼 가치가 있는지입니다.

이 수준 이전에는 비용에 관한 대화는 일반적으로 AI에 관한 것이며 속도 저하로 끝나는 대화입니다. 그 다음에는 결정으로 끝나는 대화인 특정 에이전트에 관한 것입니다.

4단계: 여전히 작동하는지 알 수 있습니다.

평가 기준은 샘플링이 아닌 모든 실행에서 자동으로 기록되고 점수가 매겨집니다. 검사에 실패하면 나중에 읽을 보고서를 생성하는 대신 실행이 중단됩니다.

이제 당신이 대답할 수 있는 질문은 이것이 조용히 악화됐는가 하는 것입니다.

이는 검토를 획일적인 의심에서 분류로 전환하기 때문에 규모를 가능하게 하는 수준입니다. 그 아래에는 모든 신규 에이전트마다 영구적인 인적 검토 비용이 추가됩니다.

레벨 5: 안전하게 변경할 수 있습니다.

최적화는 자체 평가를 기준으로 측정됩니다. 에이전트는 버전 관리 및 롤백을 통해 카탈로그를 통해 공유됩니다. 정책은 설명된 것이 아니라 조치가 취해지는 시점에 시행됩니다.

이제 답변할 수 있는 질문은 다음과 같습니다. 이를 변경하면 어떻게 되며 취소할 수 있습니까?

사다리에 대해 우리가 알아차린 것

조직은 인식된 정교함의 순서로 이를 높이려고 합니다. 평가와 최적화는 고급스러워 보이기 때문에 초기에 배치하고, 관리적인 것처럼 보이기 때문에 인벤토리를 늦게 배치합니다.

그 순서는 작동하지 않습니다. 소유권이 없는 평가는 누구도 실패한 점수에 대해 조치를 취하지 않는다는 것을 의미합니다. 기여 없는 최적화는 절감 효과가 실제로 발생했는지 여부를 알 수 없음을 의미합니다. 매력적이지 않은 수준은 하중을 견딜 수 있습니다.

대부분의 조직이 실제로 있는 곳

우리 경험에 따르면 레벨 4 표준에서 에이전트를 구축하고 레벨 1 또는 2에서 작동할 수 있습니다. 팀이 구축할 수 있는 것과 설명할 수 있는 것 사이의 격차가 현재의 결정적인 문제이며 이것이 이 플랫폼이 존재하는 이유입니다.

다음

에이전트 오케스트레이션 시스템 페이지에서는 소유권, 속성, 예산, 평가 및 에이전트 허브를 다룹니다. 자신의 수준이 어느 정도인지 확인하려면 데모를 예약하세요. 실제 배포와 비교하여 확인해 보겠습니다.