Konuşma tanıma sistemleri, benchmark optimizasyonu nedeniyle gerçek performanslarını tam olarak yansıtmayabilir. Araştırmacılar, bu sorunu ölçmek için üç test geliştirdi.
Bu testler, sistemlerin benchmarklara göre optimize edildiğini ve gerçek performanslarını tam olarak yansıtmadığını gösterdi.
Sonuçlar, konuşma tanıma sistemlerinin geliştirilmesinde daha gerçekçi ve kapsamlı bir yaklaşım gerektiğini vurguladı.