전사 시스템이 조정되지 않은 언어를 만났을 때 문제가 발생하는 이유

적용 범위 목록에 나타나는 언어는 시스템이 해당 언어를 처리하도록 훈련되었음을 의미합니다. 이는 시스템이 녹음에 포함된 버전을 처리한다는 의미는 아닙니다.

그 격차는 대부분의 실망감이 존재하는 곳이며, 계획을 세울 만큼 충분히 예측 가능합니다.

방언은 세부사항이 아니다

널리 사용되는 많은 언어는 실제로 가족어입니다. 주로 하나의 표준 형식으로 훈련된 시스템은 원어민이 완전히 평범하다고 ​​생각하는 지역 음성에서 급격히 저하될 수 있습니다.

품질 저하가 균일한 경우는 거의 없습니다. 일반적인 단어는 살아남고 특정 단어는 실패하여 유창하게 읽히고 의미를 전달하는 부분이 잘못된 대본을 생성합니다. 그것은 최악의 조합입니다. 믿을 만큼 유창하지만 문제가 될 만큼 틀린 것입니다.

코드 전환은 정상이며 시스템에서는 어렵다고 생각합니다.

많은 직장에서 사람들은 특히 기술 어휘의 경우 단일 문장 내에서 언어 간을 이동합니다. 회의는 제품 이름, 도구 및 전문 용어를 다른 언어로 사용하여 한 언어로 진행될 수 있습니다.

발언당 하나의 언어를 가정하는 시스템은 이를 잘못 처리합니다. 그들은 외국어를 모국어의 음성학에 억지로 집어넣어 그럴듯한 잘못된 단어를 만들어내거나, 아니면 그것을 버립니다. 둘 다 조용한 실패입니다.

스크립트와 방향은 모든 다운스트림에 영향을 미칩니다.

오른쪽에서 왼쪽으로 쓰는 스크립트의 경우 방향은 렌더링 문제만은 아닙니다. 라틴 제품 이름이나 번호가 포함된 혼합 방향 텍스트는 청크 생성, 색인 생성, 표시 및 인용 등 모든 후속 단계에서 올바르게 처리되어야 합니다.

정확하지만 방향을 왜곡하는 방식으로 저장된 녹취록은 이를 필요로 하는 사람들에게 손상되어 보이는 검색 결과를 생성할 것이며 원인은 발견된 위치에서 4단계 떨어져 있을 것입니다.

이름은 정확성이 실제로 중요한 부분입니다.

비즈니스 기록에서 가장 큰 비중을 차지하는 단어는 일반적으로 사람, 제품, 내부 시스템, 약어 등 일반 시스템이 가장 적게 아는 단어입니다.

이는 또한 확신에 찬 잘못된 추측이 가장 큰 피해를 입힐 수 있는 단어이기도 합니다. 제품 이름을 잘못 들었다고 해서 나중에 기록을 읽는 사람이 명백하게 오류를 범하는 것은 아니기 때문입니다. 조직에 대한 어휘 목록을 제공할 수 있는 시스템은 제공할 수 없는 보다 일반적으로 정확한 시스템보다 성능이 뛰어납니다.

솔직하게 평가하는 방법

깨끗한 샘플이 아닌 자신만의 녹음을 사용하세요. 혼선이 있는 회의, 배경 소음이 있는 통화, 지역 사투리가 강한 회의를 포함합니다.

평균 정확도보다는 중요한 용어를 기준으로 측정하세요. 모든 제품 이름을 정확하게 파악하는 전체 단어 오류율이 더 낮은 시스템이 그 반대 시스템보다 더 유용합니다.

그런 다음 링크가 아닌 체인을 측정하십시오. 상담원이 녹음에 대해 실제 질문을 하고 올바른 구절을 검색하고 정확하게 대답할 수 있습니까? 그것이 당신이 실제로 구매하는 것입니다.

배포가 시작되는 위치

녹음이 인프라를 떠날 수 없는 조직의 경우 이 모든 것이 자체 호스팅으로 작동해야 하며 호스팅된 데모가 아닌 그곳에서 평가를 실행해야 합니다. 동일한 거버넌스가 적용됩니다. 즉, 작업 시점에 정책이 적용되고, 자격 증명이 런타임에 확인되며, 자료에 접근하는 모든 에이전트를 포괄하는 감사 추적이 이루어집니다.

다음

전사 페이지에서는 언어 적용 범위 및 배포 옵션을 다룹니다. 에이전트 오케스트레이션 시스템 페이지는 전체 체인을 가정하기보다는 측정 가능하게 유지하는 평가 계층을 다룹니다.