Klasik çağrı merkezlerinde kalite denetimi örnekleme ile yapılır: bir denetçi görüşmelerin küçük bir bölümünü dinler, forma göre puanlar, geri bildirim verir. Bu yöntem insan temsilciler için makuldü çünkü alternatifi yoktu.
Sesli ajanla çalışırken bu kısıt ortadan kalkıyor. Her görüşmenin dökümü zaten üretiliyorsa, her görüşme puanlanabilir. Yüzde bir örneklem yerine yüzde yüz denetim mümkün — ve bu, kaliteyi yönetme biçimini değiştirir.
Neden örneklem yetmez
Ajanla yapılan görüşmelerde hatalar rastgele dağılmaz. Belirli bir soru tipinde, belirli bir bilgi tabanı boşluğunda veya belirli bir saatte yoğunlaşır. Küçük bir örneklem bu kümelenmeyi kaçırır.
Ayrıca ajanın davranışı tutarlıdır: bir görüşmede yaptığı hatayı benzer her görüşmede yapar. Bu kötü haber gibi görünse de aslında iyi haberdir — tek bir hatayı bulup düzelttiğinizde binlerce görüşme birden düzelir. Ama bulmak için hepsine bakmanız gerekir.
Neyi puanlayacaksınız
Puanlama kriterleri işletmeye göre değişir ama beş başlık hemen her kurulumda geçerlidir.
1. Doğruluk. Ajanın verdiği bilgi doğru muydu? Bu en kritik kriterdir ve otomatik denetimde en zor olanıdır. Pratik yaklaşım: ajanın verdiği fiyat, tarih, süre ve koşul bilgilerini bilgi tabanındaki karşılıklarıyla otomatik karşılaştırmak. Eşleşmeyen her görüşme insan denetimine düşer.
2. Çözüm. Müşterinin aradığı iş bitti mi? Bilgi verildi ama işlem yapılmadıysa çözüm sayılmaz. Bunu ölçmenin en güvenilir yolu görüşme sonrası eylemin gerçekleşip gerçekleşmediğine bakmaktır: randevu oluştu mu, sipariş güncellendi mi, kayıt açıldı mı.
3. Devretme davranışı. Devretmesi gereken yerde devretti mi, gereksiz yere devretti mi? Bu iki hatanın oranı ayrı ayrı izlenmelidir.
4. Konuşma kalitesi. Sözünü kesti mi, gereksiz uzattı mı, tekrara düştü mü? Döküm üzerinden ölçülebilir: ajanın kelime sayısı, tur sayısı ve aynı cümlenin tekrarı.
5. Uyum. Kayıt bildirimi yapıldı mı, kimliğini söyledi mi, toplamaması gereken veriyi topladı mı? Bu kriterlerde puan değil, geçti-kaldı mantığı kullanılmalı.
Akış nasıl kurulur
İşleyen bir denetim akışı üç katmanlıdır.
Katman 1 — otomatik kural kontrolü. Her görüşme, kural setinden geçirilir: kayıt bildirimi var mı, yasak ifade geçti mi, süre eşiği aşıldı mı, devretme kuralı tetiklenmesi gerekirken tetiklenmemiş mi. Bu katman ucuzdur ve tüm görüşmelere uygulanır.
Katman 2 — otomatik değerlendirme. Görüşme dökümü, tanımlı kriterlere göre puanlanır. Burada dikkat edilmesi gereken nokta: değerlendirmeyi yapan sistemin de yanılabileceği. Bu yüzden puanları mutlak doğru değil, sıralama aracı olarak kullanın — düşük puanlı görüşmeleri insan denetimine yönlendirin.
Katman 3 — insan denetimi. Haftada belirli sayıda görüşme insan tarafından dinlenir. Seçim rastgele olmamalı: düşük puanlılar, devretmeyle sonuçlananlar, uzun sürenler ve müşteri memnuniyetsizliği sinyali olanlar öncelikli.
Üçüncü katmanı tamamen kaldırmayın. Otomatik denetim, kriterlerin dışında kalan sorunları göremez; insan kulağı yeni sorun tiplerini keşfeder.
Bulguları düzeltmeye bağlamak
Denetimin değeri, bulgunun düzeltmeye dönüşme hızıyla ölçülür. İşleyen döngü:
- Haftalık bulgu listesi çıkarılır.
- Her bulgu üç kategoriden birine atanır: bilgi tabanı eksiği, talimat sorunu, kural eksiği.
- Kategoriye göre düzeltme yapılır.
- Bir sonraki hafta aynı bulgu tipinin oranına bakılır.
Bu döngünün en sık aksadığı yer ikinci adımdır. Her sorunu talimata madde ekleyerek çözme eğilimi, bir süre sonra çelişkili ve şişkin bir talimat seti üretir. Bilgi tabanı eksiğini talimatla kapatmaya çalışmayın.
Ölçülecek üst düzey sayılar
Yönetim tarafına raporlanacak sayılar sadeleştirilmelidir:
- Çözüm oranı. Görüşmelerin yüzde kaçı işi bitirdi?
- Devretme oranı ve geç devretme oranı.
- Doğruluk ihlali sayısı. Bilgi tabanıyla çelişen görüşme sayısı. Hedef sıfırdır.
- Uyum ihlali sayısı. Kayıt bildirimi veya kimlik beyanı eksiği. Hedef sıfırdır.
- Ortalama görüşme süresi ve tur sayısı. Trend olarak izlenir.
Bu beş sayı, sesli ajan operasyonunun sağlığını göstermeye yeter. Daha fazlası rapor üretir ama karar üretmez.
Üç tuzak
Puanı hedef haline getirmek. Kalite puanı yükselsin diye kriterleri gevşetmek kolaydır. Puan bir gösterge, hedef değil.
Sadece kötü görüşmelere bakmak. İyi giden görüşmeler de bilgi taşır: hangi soru tipinde ajan gerçekten iyi çalışıyor, hangi akış sorunsuz işliyor. Bu bilgi, ajanın kapsamını genişletirken yol gösterir.
Denetimi ajanla sınırlamak. Devredilen görüşmelerin insan tarafındaki devamı da denetlenmeli. Ajan doğru devretmiş ama ekip görüşmeyi kötü yönetmişse, müşteri açısından sonuç aynıdır.
Görüşme verilerinin nasıl raporlandığını analitik ve içgörü sayfasında inceleyebilirsiniz.