Sesli yapay zekâ, konuşmayı anlayıp eyleme geçirir.

Sesli yapay zekâ nedir?

Sesli yapay zekâ, insan konuşmasını makinenin işleyebileceği veriye dönüştürür, konuşmanın ne anlama geldiğini belirler ve uygun cevabı tekrar sese çevirir. Tüketici ürünlerinde bu cevap bir bilgi olabilir. İşletme kullanımında müşteri genellikle bir sonuç bekler: randevu, rezervasyon, bilgi güncelleme veya doğru çalışana bağlantı.

Bu nedenle ‘konuşuyor’ ile ‘işi tamamlıyor’ arasındaki farkı ölçmek gerekir. Güzel bir ses, yanlış saati onaylıyorsa iyi bir müşteri deneyimi yaratmaz.

Sesli AI hangi bileşenlerden oluşur?

• Ses algılama (ASR/STT): Hattaki konuşmayı ve zamanlamayı makinenin işleyebileceği metne dönüştürür.
• Dil ve karar katmanı: Niyeti, bağlamı, eksik bilgiyi ve uygulanacak işletme kuralını belirler.
• Araç kullanımı: Takvim, CRM, sipariş veya bilgi tabanını izinli kapsamda sorgular ve günceller.
• Ses üretimi (TTS): Cevabı seçilen dil ve sesle konuşmaya dönüştürür.
• Orkestrasyon: Kesinti, bekleme, hata, tekrar, insan devri ve görüşme sonunu yönetir.

Doğal deneyimi yalnızca ses kalitesi belirlemez.

İnsanlar telefonda küçük gecikmelere bile duyarlıdır. Sistem çok geç cevap verirse müşteri konuşmaya devam eder; çok erken girerse sözünü keser. Bu yüzden uçtan uca gecikme, konuşma sonunu algılama ve müşterinin araya girmesine verilen tepki birlikte test edilmelidir.

Hat kalitesi, arka plan sesi, hoparlör modu ve bölgesel telaffuz laboratuvar testinden farklı sonuç üretebilir. Kabul testi gerçek telefon hattı ve gerçek cihazlarla yapılmalıdır.

Çok dilli sesli yapay zekâ nasıl çalışır?

Bir agent birden fazla dili destekleyecek şekilde yapılandırılabilir. Müşteri konuşmanın ortasında dil değiştirdiğinde sistem dili algılayıp o dile ait cevaba ve sese geçebilir. Ancak bu davranış varsayım olarak bırakılmamalı; desteklenen her dil, kendi ilk mesajı, sesi, telaffuz sözlüğü ve test setiyle hazırlanmalıdır.

AloMerhaba adı Arapça ve Farsçada ‘الومرحبا’ olarak telaffuz edilmelidir; başına uzun ‘آ’ sesi eklenmemelidir. Marka, kişi, hizmet ve yer adları için telaffuz sözlüğü oluşturmak küçük ama kritik bir kalite adımıdır.

• Her dil için ana diliyle uyumlu bir ses seçin.
• Dil değiştirme cümlelerini açıkça test edin: ‘Farsça devam edelim’, ‘Can we continue in English?’ gibi.
• Tarih, saat, para, adres ve özel isimleri dil başına doğrulayın.
• Asistanın desteklemediği dili nasıl açıklayacağını ve insana nasıl devredeceğini belirleyin.

Sesten eyleme geçiş nasıl güvenilir olur?

Asistan kritik alanları konuşmadan çıkardıktan sonra canlı kaynağa sorar. Dört kişilik masa, Cuma, 19.00 sonrası gibi bilgiler müşteriye kısa biçimde tekrar edilir. Müşteri onayladığında araç çağrısı yapılır ve sonuç yeniden doğrulanır. Araç başarısızsa asistan işlemi tamamlanmış gibi söylememelidir.

Bu akış, sesli agent değerlendirmesinde en güçlü testtir. Konuşma doğal olabilir; fakat arka sistemde doğru kayıt yoksa ürün işletme için çalışmıyor demektir.

Sesli AI kalite testi nasıl yapılır?

• Doğru anlama: tarih, sayı, ad, hizmet ve olumsuzlama hataları.
• Sıra alma: müşteri durduğunda yanıt süresi ve araya girme davranışı.
• Araç sonucu: konuşulan bilgi ile sistemde oluşan kaydın birebir eşleşmesi.
• Dil geçişi: tek istekte doğru dil ve sese geçme.
• Hata onarımı: yanlış anlama sonrası kısa ve doğal açıklama isteme.
• İnsan devri: doğru zamanda, yeterli özet ve bağlamla aktarım.