VAmoS Energy: Sesli AI Ajanları Gerçek Dünya Koşullarında Test Etmek

Üretim ortamındaki sesli yapay zeka ajanları, sade laboratuvar testlerinin çok ötesinde zorluklar yaşıyor. Çoklu müşteri istekleri, arka plan sesli müdahaleler ve sabrı tükenen kullanıcılarla başa çıkması gerekiyor. Araştırmacılar bu gerçekçi senaryoları ölçmek için yeni bir benchmark geliştirdi: VAmoS Energy.

• 100 gerçekçi çağrı senaryosu - Fatura ödeme ve yardım konularında, her çağrıda 2–4 ayrı istek bulunuyor
• 16 aracı araç desteği - Stripe ödeme sistemi ile bağlantılı durum yönetimi ve Apache Fineract kredi motoru
• Kimlik doğrulama zorlukları - Hesap erişimi ancak müşteri doğrulanması başarılı olduktan sonra açılıyor
• Gerçek dünya gürültüsü - Arka plan konuşması ve kesintiler ajanın performansını test ediyor

Benchmark, sadece ajanın bir soruyu cevaplayabilip cevaplayamadığını değil, aynı zamanda kusursuz bir müşteri deneyimi sağlayıp sağlayamadığını ölçüyor. Fatura sorgusu sırasında bir müşterinin ödeme planı değiştirmek istemesi, kimlik doğrulamada yeniden başlamak zorunda kalması veya arka plan gürültüsü nedeniyle isteğin tekrarlanması gibi senaryolar dahil ediliyor.

Bu araştırma, üretim ortamı için kullanıma hazır sesli ajanlar geliştirenleri hedef alıyor. VAmoS Energy, mühendislerin gerçekçi zorluk derecesiyle sistemlerini iyileştirmesine ve daha güvenilir müşteri hizmetleri sunmasına yardımcı olacak.