Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.
Inferensi menggunakan Anthropic Messages API
Anthropic Messages API menyediakan akses asli ke model Claude menggunakan format permintaan dan respons Anthropic. Anda dapat menggunakan Messages API di kedua bedrock-runtime titik akhir bedrock-mantle dan memberi Anda fleksibilitas untuk memilih gaya otentikasi dan integrasi yang sesuai dengan aplikasi Anda.
| Titik akhir | URL dasar | Kasus penggunaan |
|---|---|---|
bedrock-mantle |
https://bedrock-mantle.{region}.api.aws/anthropic/v1/messages |
Direkomendasikan untuk aplikasi baru. Mendukung autentikasi kunci API danRuang kerja () Anthropic-compatible. |
bedrock-runtime |
https://bedrock-runtime.{region}.amazonaws.com |
Gunakan dengan integrasi AWS SDK yang ada dan logging pemanggilan. |
Wilayah yang Didukung
API Pesan tersedia di bedrock-mantle titik akhir di semua Wilayah yang mendukung bedrock-mantle (lihatWilayah dan Titik Akhir yang Didukung). Pada bedrock-runtime titik akhir, tersedia di semua Wilayah di mana model Claude tersedia. Lihat Ketersediaan wilayah untuk detail.
Prasyarat
Sebelum menggunakan Messages API, pastikan Anda memiliki yang berikut:
-
Akses model — Minta akses ke model Claude di konsol Amazon Bedrock. Lihat Minta akses ke model.
-
Otentikasi — Tergantung pada titik akhir:
-
bedrock-mantle— Gunakan kunci Amazon Bedrock API (lihatKunci API) atau kredenal AWS SiGv4. -
bedrock-runtime— Gunakan kredensi AWS SiGv4 melalui AWS SDK (boto3, dll.).
-
-
Header versi antropik - Semua permintaan memerlukan versi API:
-
bedrock-mantle: Ditetapkananthropic-version: 2023-06-01sebagai header HTTP. -
bedrock-runtime: Ditetapkan"anthropic_version": "bedrock-2023-05-31"di badan permintaan.
-
Permintaan dasar
Untuk mengirim pesan dasar ke model Claude, pilih tab untuk metode pilihan Anda, lalu ikuti langkah-langkahnya:
Tanggapan aliran
Untuk menerima token respons secara bertahap saat dibuat, pilih tab untuk metode pilihan Anda, lalu ikuti langkah-langkahnya:
Fitur yang didukung
Messages API mendukung fitur-fitur canggih berikut dengan model Claude:
-
Permintaan sistem - Atur perilaku model dengan
systemparameter. -
Multi-turn percakapan — Lulus bolak-balik
userdanassistantpesan. -
Penggunaan alat - Tentukan alat yang dapat dipanggil model. Lihat Gunakan alat untuk menyelesaikan respons model Amazon Bedrock.
-
Visi - Kirim gambar dalam
contentarray bersama teks. -
Pemikiran yang diperluas — Aktifkan penalaran rantai pikiran. Lihat Tingkatkan respons model dengan penalaran model.
-
Prompt caching — Cache sering digunakan konteks untuk mengurangi latensi dan biaya.
Untuk format permintaan dan respons Messages API lengkap, termasuk semua parameter dan fitur, lihatAntropik Claude Pesan API.
Hitung token
Untuk menghitung jumlah token input yang akan dikonsumsi permintaan sebelum mengirimnya untuk inferensi, gunakan count_tokens jalur Anthropic di titik akhirbedrock-mantle. Ini adalah satu-satunya jalur penghitungan token yang didukung untuk model Claude yang tidak tersedia dengan Region-specific titik akhir, termasuk model Claude yang diluncurkan bedrock-runtime dengan inferensi lintas wilayah (CRIS) saja. Untuk detail dan contoh, lihat Hitung token menggunakan endpoint batuan dasar mantel.