Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.
Anda dapat membuat evaluasi model otomatis di Studio atau dengan menggunakan fmeval
pustaka di dalam kode Anda sendiri. Studio menggunakan wizard untuk membuat pekerjaan evaluasi model. fmeval
Perpustakaan menyediakan alat untuk menyesuaikan alur kerja Anda lebih lanjut.
Kedua jenis pekerjaan evaluasi model otomatis mendukung penggunaan model yang tersedia JumpStart untuk umum, dan JumpStart model yang sebelumnya Anda gunakan ke titik akhir. Jika Anda menggunakan JumpStart yang belum digunakan sebelumnya, SageMaker AI akan menangani pembuatan sumber daya yang diperlukan, dan mematikannya setelah pekerjaan evaluasi model selesai.
Untuk menggunakan teks berdasarkan AWS layanan LLMs lain atau model yang dihosting di luar AWS, Anda harus menggunakan fmeval
pustaka.
Ketika pekerjaan Anda selesai, hasilnya disimpan di bucket Amazon S3 yang ditentukan saat pekerjaan dibuat. Untuk mempelajari cara menafsirkan hasil Anda, lihatMemahami hasil pekerjaan evaluasi model Anda.