Bütün danışıqları analiz etmək nə zaman mənalıdır

Qısa cavab

Bütün danışıqları analiz etmək üç halda mənalıdır: axtardığınız hadisə nadirdir (məsələn, söhbətlərin 1–2%-də görünən etiraz və ya şikayət), nəticəni kiçik seqmentlər üzrə bölmək lazımdır (kanal × məhsul × həftə) və ya konkret söhbətə qayıtmaq lazımdır (məsələn, müştəriyə geri zəng etmək üçün). Bu hallarda nümunə kifayət etmir.

Əgər sual ümumi bölgü haqqındadırsa — «ən çox yayılmış üç etiraz hansıdır?» — yaxşı seçilmiş nümunə də kifayət edə bilər. Tam əhatə avtomatik analizlə ucuzlaşsa da, keyfiyyəti yoxlamaq üçün insan nümunəsi yenə lazımdır. Yəni seçim «hamısı və ya nümunə» deyil, «avtomatik hamısı + insan nümunəsi»dir.

Niyə bu sual yaranır

Əvvəllər söhbətləri insanlar oxuyurdu və bütün söhbətləri oxumaq qeyri-mümkün idi. Buna görə şirkətlər təsadüfi nümunə ilə işləyirdi: ayda yüz söhbət, bəlkə iki yüz. AI ilə avtomatik analiz yarananda təbii sual çıxdı: indi hamısını analiz etmək lazımdırmı? Cavab «bəli, həmişə» deyil, çünki hər analizin xərci, gecikməsi və səhv payı var, bəzi suallar üçün isə tam əhatə əlavə dəyər vermir.

Nümunə nə vaxt kifayətdir

• Sual ümumi bölgü haqqındadır və tez-tez rast gəlinən dəyərlərlə maraqlanırsınız.
• Nəticə seqmentlərə bölünməyəcək və ya seqmentlər böyükdür.
• Söhbət həcmi azdır və onsuz da hamısını oxumaq mümkündür.
• Qərar bir dəfəlikdir, trend izləmək lazım deyil.
• Sahələr hələ kalibrasiya olunur və tam analiz sonradan yenidən aparılmalı olacaq.

Məsələn, ayda 3 000 söhbəti olan şirkət «müştərilər ən çox nəyi soruşur?» sualına təsadüfi seçilmiş 300 söhbətlə də ağlabatan cavab ala bilər: ən böyük mövzular onsuz da görünəcək.

Tam əhatə nə vaxt lazımdır

1. 1Nadir hadisələrSöhbətlərin 1%-ində görünən hadisə 300 söhbətlik nümunədə cəmi 3 dəfə çıxır. Belə az sayla trend görmək mümkün deyil. Hüquqi təhdid, ciddi şikayət, təhlükəsizlik problemi kimi hadisələr adətən nadirdir və vacibdir.
2. 2Kiçik seqmentlərNəticəni kanal, məhsul, region və həftə üzrə bölmək istəyirsinizsə, hər hüceyrəyə kifayət qədər söhbət düşməlidir. Nümunə hər hüceyrədə çox kiçik olur.
3. 3Fərdi hərəkətSöhbətdən sonra konkret müştəri ilə əlaqə saxlamaq lazımdırsa (məsələn, maraq göstərib cavab almayan lead-lər), nümunə 90%-ni gözdən qaçırır.
4. 4Trend izləməHəftəlik dəyişikliyi görmək üçün hər həftənin rəqəmi sabit olmalıdır. Kiçik nümunədə təsadüfi dalğalanma əsl dəyişiklikdən böyük ola bilər.
5. 5Kampaniya və ya hadisə analiziKonkret reklam, qiymət dəyişikliyi və ya nasazlıqdan sonra təsiri görmək üçün həmin dövrün bütün söhbətləri lazımdır.

Sadə hesab: nümunə nə qədər dəqiqdir

Nümunədən alınan payın təxmini xətası təxminən bu düsturla hesablanır: 1,96 × √(p × (1 − p) / n), burada p — pay, n — nümunə ölçüsüdür. Məsələn, 400 söhbətlik nümunədə etirazın payı 20%-dirsə, xəta təxminən ±4 faiz bəndidir: real pay 16% ilə 24% arasındadır. Pay 2%-dirsə, eyni nümunədə xəta ±1,4 bənd olur, amma bu, payın özünün 70%-i qədərdir — nəticə praktik olaraq istifadə edilə bilmir.

Tam əhatənin xərcləri

• Analiz xərci: hər söhbət AI ilə analiz olunur və bunun hesablama dəyəri var.
• Səhv həcmi: AI səhv payı faiz kimi sabit qalır, amma mütləq sayı artır — 10 000 söhbətdə 3% səhv 300 yanlış nəticə deməkdir.
• Oxuma yükü: daha çox nəticə daha çox sübut oxumaq tələb edir; sahibi olmayan nəticə yığılır.
• Məxfilik: daha çox söhbət analizdən keçir, giriş və saxlama qaydaları daha geniş tətbiq olunur.

Hibrid model: avtomatik hamısı + insan nümunəsi

1. 1Avtomatik tam əhatəBütün uyğun söhbətlər qurulmuş sahələr üzrə analiz olunur.
2. 2Əhatə nəzarətiHər dövr üçün neçə söhbətin analiz edildiyi, neçəsinin buraxıldığı və ya xəta aldığı izlənir.
3. 3İnsan yoxlamasıHər həftə hər əsas sahədən 30–50 nəticə əl ilə yoxlanılır: AI-nin seçdiyi dəyər doğrudurmu?
4. 4Nadir hadisə üçün tam oxuCiddi və nadir dəyərlərin (məsələn, «hüquqi şikayət») bütün söhbətləri insan tərəfindən oxunur.
5. 5KalibrasiyaYoxlamada sistematik səhv görünəndə sahənin tərifi və dəyərləri düzəldilir, sonra yenidən analiz aparılır.

Qərar cədvəli

• Ümumi bölgü, böyük dəyərlər, bir dəfəlik qərar → nümunə kifayətdir.
• Trend, həftəlik izləmə → tam əhatə və ya hər həftə eyni ölçülü böyük nümunə.
• Nadir və ciddi hadisə → tam əhatə + bütün tapılanların insan oxusu.
• Seqment üzrə müqayisə → tam əhatə.
• Fərdi müştəri hərəkəti → tam əhatə.
• Sahələr hələ sınaqdadır → əvvəl nümunə, sonra tam əhatə.

İllüstrativ nümunə

Bu, illüstrativ nümunədir. Bir internet mağazası əvvəl ayda 200 təsadüfi söhbəti oxuyurdu və şikayətlərin əsasən çatdırılma haqqında olduğunu bilirdi. Tam əhatəyə keçəndən sonra həmin ümumi mənzərə dəyişmədi. Amma nümunədə heç görünməyən bir dəyər üzə çıxdı: ayda 25–30 söhbətdə müştərilər eyni kuryer xidmətinin bağlamanı açılmış halda təhvil verdiyini yazırdı. 200-lük nümunədə bu, ayda bir-iki dəfə görünürdü və təsadüf sayılırdı.

Nəticə: ümumi sual üçün nümunə yetərli idi, nadir və ciddi problem üçün isə tam əhatə lazım oldu.

Tez-tez edilən səhvlər

• «Hamısını analiz edirik» deyib nəticələrin keyfiyyətini heç yoxlamamaq.
• Nümunəni təsadüfi yox, «maraqlı görünən» söhbətlərdən seçmək.
• Nümunə ölçüsünü həftədən həftəyə dəyişmək və sonra trend axtarmaq.
• Analiz olunmamış söhbətləri sıfır nəticə kimi saymaq.

Vexvon-da əhatə necə idarə olunur

Vexvon-da analiz açıq olduqda son mesajdan 24 saat keçmiş və ən azı iki müştəri mesajı olan bütün söhbətlər avtomatik analiz olunur; test söhbətləri və daxili qeydlər daxil edilmir. Panel analiz olunmuş, növbədə gözləyən və xəta almış söhbətlərin sayını, hesabat isə dövrün nə qədərinin analiz edildiyini göstərir. Nadir dəyərlər üçün hər dəyərin arxasındakı söhbətlərin tam siyahısını açıb oxumaq mümkündür. Ətraflı: Vexvon analitikası.

Növbəti addım

Qərar sualınızı yuxarıdakı cədvəllə tutuşdurun: nadir hadisə və ya seqment müqayisəsi varsa, tam əhatə planlayın və insan yoxlamasını əvvəlcədən təyin edin. Pilotun ümumi planı danışıq analitikası pilotu yazısındadır; öz həcminizə uyğun modeli demo zamanı müzakirə edə bilərik.

Mövzunun davamı: danışıq analitikası.