Detail hasil tes

Hasil tes menunjukkan rincian set tes, maksud yang digunakan, dan slot yang digunakan. Ini juga menyediakan rincian input set tes keseluruhan mencakup hasil keseluruhan, hasil percakapan, maksud, dan hasil slot.

Hasil tes terdiri dari semua informasi terkait pengujian seperti:

• Metadata detail uji

• Hasil keseluruhan

• Hasil percakapan

• Hasil maksud dan slot

• Hasil terperinci

Tab hasil keseluruhan:

Rincian input set tes - Bagan ini menunjukkan rincian jumlah percakapan dan ucapan input tunggal dalam set pengujian.

Perincian input tunggal — Menampilkan dua bagan yang mencakup end-to-end percakapan dan transkripsi ucapan. Jumlah input yang lulus dan gagal ditunjukkan pada setiap bagan. Catatan: Bagan transkripsi ucapan hanya akan terlihat untuk set tes audio.

Perincian percakapan - Menampilkan dua bagan yang mencakup end-to-end percakapan dan transkripsi ucapan. Jumlah input yang lulus dan gagal ditunjukkan pada setiap bagan. Catatan: Bagan transkripsi ucapan hanya akan terlihat untuk set tes audio.

Tab hasil percakapan:

Tingkat kelulusan percakapan — Tabel tarif kelulusan percakapan digunakan untuk melihat maksud dan slot mana yang digunakan dalam setiap percakapan di set tes. Anda dapat memvisualisasikan di mana percakapan gagal dengan meninjau maksud atau slot mana yang gagal, bersama dengan persentase kelulusan dari setiap maksud dan slot.

Metrik kegagalan maksud percakapan — Metrik ini menunjukkan 5 intent berkinerja terburuk teratas dalam set pengujian. Panel ini menunjukkan bagan berapa persen atau jumlah maksud yang berhasil atau gagal berdasarkan log percakapan atau transkripsi bot. Niat sukses tidak berarti bahwa seluruh percakapan berhasil. Metrik ini hanya berlaku untuk nilai intent, terlepas dari maksud mana yang datang sebelum atau sesudahnya.

Metrik kegagalan slot percakapan — Metrik ini menunjukkan 5 slot berkinerja terburuk teratas dalam set pengujian. Menunjukkan tingkat keberhasilan untuk setiap slot dalam maksud. Grafik batang menunjukkan transkripsi ucapan dan end-to-end percakapan untuk setiap slot dalam maksud.

Tab hasil intent dan slot:

Metrik pengenalan maksud — Menampilkan tabel berapa banyak intent yang berhasil dikenali. Menampilkan tingkat kelulusan transkripsi ucapan dan end-to-end percakapan.

Metrik resolusi slot — Menunjukkan maksud dan slot secara terpisah, dan tingkat keberhasilan dan kegagalan setiap slot untuk setiap maksud yang digunakan dalam percakapan atau input tunggal. Menampilkan tingkat kelulusan transkripsi ucapan dan end-to-end percakapan.

Tab hasil terperinci:

Hasil terperinci — Menampilkan tabel terperinci pada log percakapan dengan ucapan Pengguna dan Agen serta output yang diharapkan dan transkripsi yang diharapkan untuk setiap slot. Anda dapat mengunduh laporan ini dengan memilih tombol Unduh.

Tabel berikut mencantumkan pesan kesalahan kegagalan hasil dengan skenario.

Skenario	Pesan kesalahan	Tindakan
Ketidakcocokan Niat	BookFlight Niat yang diharapkan tetapi itu BookHotel niat.	Lewati belokan lain dalam percakapan
Ketidakcocokan Elisitasi Slot	Slot DepartureDate yang diharapkan akan diperoleh tetapi itu CabinType.	Lewati belokan lain dalam percakapan
Ketidakcocokan nilai slot	Ketidakcocokan antara nilai slot yang diharapkan dan aktual.	Lanjutkan dengan belokan lain dalam percakapan
Prompt ack-to-back agen B tidak ada	Bot yang diharapkan untuk mengembalikan prompt agen pada giliran ini tetapi tidak diterima.	Lewati belokan lain dalam percakapan
Ketidakcocokan Transkripsi	Transkripsi yang diharapkan tidak cocok dengan transkripsi yang sebenarnya.	Lanjutkan dengan belokan lain dalam percakapan
Slot opsional tidak ditimbulkan	Diharapkan untuk mendapatkan slot CabinType di giliran berikutnya, namun niat saat ini terpenuhi sebelum itu.	Lewati belokan lain dalam percakapan
Slot tidak dikenali	Slot DepartureDate yang diharapkan tidak dikenali pada giliran ini.	Lewati belokan lain dalam percakapan
Prompt back-to-back agen tambahan	Diharapkan giliran pengguna tetapi itu adalah prompt agen	Lewati belokan lain dalam percakapan