Zəif səs yazısı operator balını necə təhrif edir

Qısa cavab

Zəif səs yazısı operatorun balını iki yolla təhrif edir: sistem deyilən sözü eşitmir və operator «demədi» sayılır, ya da sözü səhv eşidir və operatora heç demədiyi bir şey aid edilir. Hər iki halda səhv operatorun deyil, yazının keyfiyyətinindir. Ona görə zəif və ya natamam yazı avtomatik olaraq mənfi bal verməməlidir — belə zəngdə meyar «xeyr» yox, «qiymətləndirmək mümkün deyil» statusu almalıdır.

Bu, texniki detal deyil, ədalət məsələsidir. Səsi pis yazılan xətdə işləyən operator hər ay digərlərindən aşağı bal alırsa və bunun səbəbi mikrofon və ya şəbəkədirsə, qiymətləndirmə sistemi operatoru deyil, avadanlığı ölçür.

Beş tipik yazı problemi

1. 1Fon səs-küyüAçıq ofis, küçə, maşın, televizor. Qısa sözlər — «bəli», «yox», rəqəmlər — ən çox itən hissədir, halbuki təsdiq və qiymət məhz bunlardır.
2. 2Kəsilmə və paket itkisiŞəbəkə zəif olanda cümlənin bir hissəsi yazıya düşmür. Transkriptdə cümlə yarımçıq qalır və ya iki cümlə birləşir.
3. 3ClippingSəs çox yüksək yazılanda dalğanın zirvələri kəsilir və səs xırıldayır. Tanıma xətası artır, xüsusilə yüksək səslə danışan müştəridə.
4. 4Natamam yazıYazı zəngin ortasında başlayır və ya bitmədən dayanır. Salamlaşma və ya yekun hissə yoxdursa, həmin meyarlar qiymətləndirilə bilməz.
5. 5Aşağı keyfiyyətli kodekÇox sıxılmış format danışığı başa düşülən saxlaya bilər, amma avtomatik tanımanın dəqiqliyini azalda bilər.

Səhv necə bala çevrilir

Yazı keyfiyyətindən gələn xəta zəncirvari şəkildə yayılır. Aşağıdakı nümunə illüstrativdir:

1. 1YazıOperator «Sifarişiniz cümə axşamı çatdırılacaq, saat 14-dən 18-ə qədər» deyir. Bu anda xətdə iki saniyəlik kəsilmə olur.
2. 2Transkript«Sifarişiniz cümə ... 18-ə qədər». Gün və vaxt aralığı yarımçıq qalır.
3. 3Qiymətləndirmə«Operator çatdırılma vaxtını dəqiq dedi» meyarı «xeyr» və ya «qismən» alır.
4. 4NəticəOperatorun balı aşağı düşür və rəy söhbətində ona heç etmədiyi səhv göstərilir.

Bu zəncirin hər halqasında yoxlama nöqtəsi qoymaq olar: yazının özündə, transkriptin etibarlılığında və qiymətləndirmə statusunda.

Üç status: xeyr, tətbiq olunmur, qiymətləndirmək mümkün deyil

1. 1XeyrMeyar tətbiq olunurdu, yazı kifayət qədər aydındır və davranış yoxdur. Yalnız bu status balı aşağı salır.
2. 2Tətbiq olunmurMeyar bu zəngə aid deyil: məsələn, müştəri etiraz etməyib, ona görə etirazla iş meyarı yoxlanmır. Bala daxil edilmir.
3. 3Qiymətləndirmək mümkün deyilMeyar tətbiq oluna bilərdi, amma yazının həmin hissəsi itib və ya etibarsızdır. Bala daxil edilmir və hesabatda ayrıca sayılır.

Üçüncü status olmayanda sistem iki pis seçim arasında qalır: ya «xeyr» deyib operatoru cəzalandırır, ya da «tətbiq olunmur» deyib problemi gizlədir. Hər ikisi hesabatı yanıldır.

İllüstrativ yazı keyfiyyəti qaydası

Aşağıdakı qayda illüstrativ nümunədir. Hədləri öz yazılarınız və pilot nəticələriniz əsasında təyin edin.

1. 1Tam qiymətləndirməYazı zəngin əvvəlindən sonuna qədərdir, aşağı etibarlı sətirlər azdır və meyarlar üçün vacib anlarda deyil.
2. 2Məhdud qiymətləndirməYazının bir hissəsi zəifdir. Həmin hissəyə düşən meyarlar «qiymətləndirmək mümkün deyil» alır, qalanı normal qiymətləndirilir. Bal əhatə dairəsi ilə birlikdə göstərilir.
3. 3Qiymətləndirmə yoxdurYazı çox qısadır, tərəflərdən birinin səsi yoxdur, danışığın böyük hissəsi anlaşılmır. Zəng bal almır, yazı problemi kimi qeyd edilir və texniki komandaya ötürülür.
4. 4İnsan yoxlamasıKritik meyar — məsələn, məcburi açıqlama — zəif hissəyə düşübsə, qərarı insan səsi dinləyərək verir.

Əhatə dairəsini göstərmək

Bal yalnız qiymətləndirilə bilən meyarlardan hesablanırsa, onun yanında neçə meyarın qiymətləndirildiyi də göstərilməlidir. Aşağıdakı nümunə illüstrativdir:

• Zəng A: 10 meyardan 10-u qiymətləndirilib, bal 80
• Zəng B: 10 meyardan 5-i qiymətləndirilib, bal 80 — qalan 5-i yazı keyfiyyətinə görə qiymətləndirilə bilməyib
• Eyni «80» fərqli etibarlılığa malikdir; B-ni A ilə eyni çəkidə operatorun ortalamasına qatmaq düzgün deyil

Operator səviyyəsində də eyni qayda: «qiymətləndirmək mümkün deyil» statusu olan zənglərin payı yüksəkdirsə, operatorun ortalaması etibarsızdır və onun xəttinin texniki vəziyyəti yoxlanmalıdır.

Səbəbi aradan qaldırmaq

• Qulaqlıq və mikrofonu yoxlayın — bir operatorun bütün zəngləri zəifdirsə, səbəb çox vaxt avadanlıqdır
• Yazı səviyyəsini tənzimləyin — çox aşağı səs tanınmır, çox yüksək səs kəsilir
• Mümkünsə, operator və müştərini ayrı kanallarda yazın
• Həddindən artıq sıxılmış formatdan qaçın; yaddaş qənaəti ilə tanıma keyfiyyəti arasında balans axtarın
• Yazının zəngin tam müddətini əhatə etdiyini — ötürmədən sonra da — yoxlayın

Yazı problemləri jurnalı

Yazı keyfiyyəti problemləri adətən təsadüfi deyil — eyni xətdə, eyni avadanlıqda, eyni saatlarda təkrarlanır. Onları görmək üçün sadə jurnal kifayətdir. Hər «qiymətləndirmək mümkün deyil» və ya «qiymətləndirmə yoxdur» halı üçün bir sətir yazılır:

1. 1Tarix və xəttZəngin vaxtı və hansı xətdə və ya növbədə olduğu.
2. 2Problemin növüSəs-küy, kəsilmə, clipping, natamam yazı, bir tərəfin səsi yoxdur.
3. 3Necə aşkarlandıAşağı etibarlı sətirlər, uğursuz analiz, insanın dinləməsi və ya operatorun etirazı.
4. 4TəsirHansı meyarlar qiymətləndirilə bilmədi və bu, operatorun balına necə təsir edə bilərdi.
5. 5Görülən işQulaqlıq dəyişdirildi, səviyyə tənzimləndi, texniki komandaya ötürüldü.

Bir ay sonra jurnal problemlərin harada cəmləşdiyini göstərir və texniki investisiya üçün konkret əsas verir: «üçüncü mərtəbədəki 6 iş yerində kəsilmə payı digərlərindən yüksəkdir».

Tipik səhvlər

• Zəif yazıda buraxılan meyarı «xeyr» saymaq
• Zəif yazıları sakitcə nümunədən çıxarmaq və bunu hesabatda göstərməmək — problemli xətlər görünməz olur
• Operatorların ortalamasını yazı keyfiyyətinə baxmadan müqayisə etmək
• Tanıma sisteminin etibarlılıq göstəricisini kalibrlənmiş ehtimal kimi oxumaq

Hüdudlar

• Sətir üzrə tanıma etibarlılığı modelin öz qiymətidir; kalibrlənmiş ehtimal deyil və sətrin düzgün olduğuna zəmanət vermir
• Aydın görünən transkript də səhv ola bilər — xüsusilə rəqəmlər, adlar və məhsul adları
• Yazı keyfiyyəti qaydasının hədləri hər şirkətin öz yazıları ilə yoxlanmalıdır
• Zəif yazıya görə qiymətləndirilə bilməyən zəng operatorun əleyhinə sayılmamalıdır

Vexvon Audio Analyzer-də nə var

• Transkriptin hər sətri tanıma sisteminin etibarlılıq qiyməti ilə gəlir; aşağı etibarlı sətirlər paneldə açıq işarələnir — gizlədilmir
• Kimin danışdığı müəyyən edilə bilməyən sətir «naməlum» kimi saxlanılır, təxmin edilmir
• Analiz alınmayan fayl səhv səbəbi ilə göstərilir və yenidən yükləmədən təkrar növbəyə qoyula bilər
• Zəng standartının addımı «tətbiq olunmur» statusu alanda operatorun əleyhinə sayılmır; «qiymətləndirmək mümkün deyil» qaydasını isə yuxarıdakı kimi öz prosesinizdə, insan yoxlaması ilə tətbiq edirsiniz

Ətraflı: Vexvon Audio Analyzer. Yazı keyfiyyətini pilotda necə yoxlamaq lazım olduğunu pilot planı, yazı sahələrini isə zəng yazısının metadata sahələri yazısında göstərmişik.

İlk addım

Son həftənin ən aşağı ballı 10 zəngini dinləyin və hər biri üçün bir sual verin: aşağı bal operatorun davranışından, yoxsa yazının keyfiyyətindən gəlir? Yazıdan gələnləri ayrıca siyahıya alın və hansı xəttə, hansı avadanlığa aid olduğunu yoxlayın. Bu yazı audio analizinin tətbiqi və etibarlılığı bölməsinə aiddir. Öz yazılarınızla sınamaq üçün bizimlə əlaqə saxlayın.

Mövzunun davamı: tətbiq olunmur, speaker diarization, zəng analizinin dəqiqliyi.