Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

# Membuat pekerjaan evaluasi RAG di Amazon Bedrock
<a name="knowledge-base-evaluation-create"></a>

Anda dapat membuat pekerjaan evaluasi RAG menggunakan Konsol Manajemen AWS, AWS CLI, atau AWS SDK yang didukung.

Jenis pekerjaan ini membutuhkan akses ke model evaluator. Jika Anda membuat pekerjaan pengambilan dan buat yang menggunakan model Amazon Bedrock sebagai generator respons, Anda juga memerlukan akses ke model itu. Kedua model harus tersedia dalam hal yang sama AWS Region. Untuk daftar generator respons dan model evaluator yang didukung, lihat[Model yang didukung](evaluation-kb.md#evaluation-kb-supported).

## Prasyarat
<a name="knowledge-base-evaluation-create-prereqs"></a>

Selain memiliki akses ke setidaknya satu model evaluator, untuk membuat pekerjaan evaluasi RAG, Anda juga memerlukan izin peran layanan IAM tertentu. Untuk mempelajari lebih lanjut tentang tindakan yang diperlukan dan persyaratan kebijakan kepercayaan, lihat[Izin peran layanan yang diperlukan untuk membuat pekerjaan evaluasi model yang menggunakan model hakim](judge-service-roles.md).

Saat membuat pekerjaan, Anda menentukan kumpulan data prompt di bucket Amazon S3, dan bucket keluaran untuk menyimpan hasil. Konfigurasi CORS tidak diperlukan untuk pekerjaan evaluasi basis pengetahuan. Untuk pekerjaan evaluasi berbasis manusia, lihat [Izin Cross Origin Resource Sharing (CORS) yang diperlukan pada bucket S3](model-evaluation-security-cors.md)

Untuk membuat pekerjaan di konsol, konsol memerlukan izin untuk melakukan serangkaian tindakan tertentu dan memiliki akses ke sumber daya yang diperlukan. Kebijakan berikut menetapkan set minimum izin IAM yang diperlukan untuk membuat pekerjaan di konsol. Dalam kebijakan tersebut, sebaiknya gunakan [Sumber daya](https://docs.aws.amazon.com/IAM/latest/UserGuide/reference_policies_elements_resource.html) elemen kebijakan IAM JSON untuk membatasi akses hanya ke model dan bucket yang diperlukan untuk pengguna, grup, atau peran IAM.

Kebijakan IAM harus memberikan akses ke model evaluator dan, untuk mengambil dan menghasilkan pekerjaan yang menggunakan model generator respons Amazon Bedrock, ke generator respons.

### Izin konsol yang diperlukan
<a name="knowledge-base-evaluation-create-prereqs-permissions"></a>

------
#### [ JSON ]

****  

```
{
    "Version":"2012-10-17",		 	 	 
    "Statement": [
        {
            "Sid": "BedrockConsole",
            "Effect": "Allow",
            "Action": [
                "bedrock:CreateEvaluationJob",
                "bedrock:GetEvaluationJob",
                "bedrock:ListEvaluationJobs",
                "bedrock:StopEvaluationJob",
                "bedrock:GetCustomModel",
                "bedrock:ListCustomModels",
                "bedrock:CreateProvisionedModelThroughput",
                "bedrock:UpdateProvisionedModelThroughput",
                "bedrock:GetProvisionedModelThroughput",
                "bedrock:ListProvisionedModelThroughputs",
                "bedrock:GetImportedModel",
                "bedrock:ListImportedModels",
                "bedrock:ListTagsForResource",
                "bedrock:UntagResource",
                "bedrock:TagResource"
            ],
            "Resource": [
                "arn:aws:bedrock:{{us-west-2}}::foundation-model/*;"
            ]
        },
        {
            "Sid": "AllowConsoleS3AccessForModelEvaluation",
            "Effect": "Allow",
            "Action": [
                "s3:GetObject",
                "s3:GetBucketCORS",
                "s3:ListBucket",
                "s3:ListBucketVersions",
                "s3:GetBucketLocation"
            ],
            "Resource": [
                "arn:aws:s3:::{{amzn-s3-demo-destination-bucket}}/*",
                "arn:aws:s3:::{{input_datasets/prompts.jsonl}}"
            ]
        }
    ]
}
```

------

**catatan**  
Kebijakan contoh ini memberikan izin untuk semua model foundation Amazon Bedrock. Dalam lingkungan produksi, kami menyarankan Anda mengikuti prinsip [hak istimewa paling sedikit](https://docs.aws.amazon.com/IAM/latest/UserGuide/best-practices.html#grant-least-privilege) dan hanya memberikan izin untuk model yang Anda butuhkan.

**Topics**
+ [Prasyarat](#knowledge-base-evaluation-create-prereqs)
+ [Membuat pekerjaan evaluasi RAG khusus pengambilan](knowledge-base-evaluation-create-ro.md)
+ [Membuat pekerjaan evaluasi RAG khusus pengambilan menggunakan metrik khusus](knowledge-base-evaluation-create-ro-custom.md)
+ [Membuat pekerjaan evaluasi RAG pengambilan dan hasilkan](knowledge-base-evaluation-create-randg.md)
+ [Membuat pekerjaan evaluasi RAG pengambilan dan hasilkan menggunakan metrik khusus](knowledge-base-evaluation-create-randg-custom.md)