Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

# Mengevaluasi dan membandingkan model klasifikasi SageMaker JumpStart teks Amazon
<a name="jumpstart-text-classification-evaluation"></a>

SageMaker AI JumpStart menawarkan beberapa model klasifikasi teks yang mengkategorikan teks ke dalam kelas yang telah ditentukan. Model-model ini menangani tugas-tugas seperti analisis sentimen, klasifikasi topik, dan moderasi konten. Memilih model yang tepat untuk produksi memerlukan evaluasi yang cermat menggunakan metrik utama termasuk akurasi, F1-score, dan Koefisien Korelasi Matthews (MCC).

Dalam panduan ini, Anda:
+ Menyebarkan beberapa model klasifikasi teks (DistiLbert dan BERT) dari katalog. JumpStart 
+ Jalankan evaluasi komprehensif di seluruh kumpulan data yang seimbang, miring, dan menantang.
+ Menafsirkan metrik lanjutan termasuk Matthews Correlation Coefficient (MCC) dan Skor Karakteristik Operasi Area Under the Curve Receiver.
+ Buat keputusan pemilihan model berbasis data menggunakan kerangka perbandingan sistematis.
+ Siapkan penerapan produksi dengan auto-scaling dan monitoring. CloudWatch 

Unduh kerangka evaluasi lengkap: [Paket Evaluasi JumpStart Model](samples/sagemaker-text-classification-evaluation-2.zip). **Paket ini mencakup hasil pra-jalankan dengan output sampel** sehingga Anda dapat melihat pratinjau proses evaluasi dan metrik sebelum menerapkan model sendiri.

## Prasyarat
<a name="w2aac37c15c11"></a>

Sebelum Anda mulai, pastikan Anda memiliki yang berikut:
+ [AWS akun dengan izin SageMaker AI](https://docs.aws.amazon.com/sagemaker/latest/dg/gs-set-up.html).
+ [SageMaker Akses AI Amazon SageMaker Studio](https://docs.aws.amazon.com/sagemaker/latest/dg/onboard-quick-start.html).
+ Pengetahuan dasar Python.
+ Memahami konsep klasifikasi teks.

Waktu dan biaya: total waktu 45 menit. Biaya bervariasi berdasarkan jenis instans dan durasi penggunaan - lihat [Harga SageMaker AI](https://aws.amazon.com/sagemaker/pricing/) untuk tarif saat ini.

Tutorial ini mencakup petunjuk pembersihan langkah demi langkah untuk membantu Anda menghapus semua sumber daya dan menghindari biaya yang sedang berlangsung.

**Topics**
+ [Prasyarat](#w2aac37c15c11)
+ [Siapkan lingkungan evaluasi Anda](jumpstart-text-classification-setup.md)
+ [Pilih dan terapkan model klasifikasi teks](jumpstart-text-classification-deploy.md)
+ [Mengevaluasi dan membandingkan kinerja model](jumpstart-text-classification-evaluate.md)
+ [Tafsirkan hasil Anda](jumpstart-text-classification-interpret.md)
+ [Terapkan model Anda dalam skala besar](jumpstart-text-classification-scale.md)