Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.
Inférence à l'aide de l'API Anthropic Messages
L'API Anthropic Messages fournit un accès natif aux modèles Claude en utilisant le format de demande et de réponse Anthropic. Vous pouvez utiliser l'API Messages à la fois sur les points de bedrock-runtime terminaison bedrock-mantle et sur les points de terminaison, ce qui vous permet de choisir le style d'authentification et d'intégration adapté à votre application.
| Point de terminaison | URL de base | Cas d'utilisation |
|---|---|---|
bedrock-mantle |
https://bedrock-mantle.{region}.api.aws/anthropic/v1/messages |
Recommandé pour les nouvelles applications. Supporte l'authentification par clé d'API et. Espaces de travail () Anthropic-compatible |
bedrock-runtime |
https://bedrock-runtime.{region}.amazonaws.com |
À utiliser avec les intégrations de AWS SDK existantes et la journalisation des appels. |
Régions prises en charge
L'API Messages est disponible sur le bedrock-mantle terminal dans toutes les régions qui le prennent en charge bedrock-mantle (voirRégions et terminaux pris en charge). En ce qui bedrock-runtime concerne le terminal, il est disponible dans toutes les régions où les modèles Claude sont disponibles. Consultez Disponibilité par région pour plus de détails.
Conditions préalables
Avant d'utiliser l'API Messages, assurez-vous de disposer des éléments suivants :
-
Accès aux modèles — Demandez l'accès aux modèles Claude dans la console Amazon Bedrock. Consultez Demander l'accès aux modèles.
-
Authentification : dépend du point de terminaison :
-
bedrock-mantle— Utilisez une clé d'API Amazon Bedrock (voirclés d’API) ou des informations d'identification AWS SigV4. -
bedrock-runtime— Utilisez les informations d'identification AWS SigV4 via le AWS SDK (boto3, etc.).
-
-
En-tête de version anthropique — Toutes les demandes nécessitent une version d'API :
-
bedrock-mantle: définianthropic-version: 2023-06-01comme en-tête HTTP. -
bedrock-runtime: défini"anthropic_version": "bedrock-2023-05-31"dans le corps de la demande.
-
Demande de base
Pour envoyer un message de base à un modèle Claude, choisissez l'onglet correspondant à votre méthode préférée, puis suivez les étapes suivantes :
Diffusez les réponses
Pour recevoir les jetons de réponse de manière incrémentielle au fur et à mesure de leur génération, choisissez l'onglet correspondant à votre méthode préférée, puis suivez les étapes suivantes :
Fonctionnalités prises en charge
L'API Messages prend en charge les fonctionnalités avancées suivantes avec les modèles Claude :
-
Invites système — Définissez le comportement du modèle à l'aide d'un
systemparamètre. -
Multi-turn conversations — Passez des
assistantmessagesuseren alternance. -
Utilisation de l'outil : définissez les outils que le modèle peut appeler. Consultez Utilisation d’un outil pour compléter une réponse au modèle Amazon Bedrock.
-
Vision — Envoyez des images dans le
contenttableau à côté du texte. -
Réflexion étendue — Activez le raisonnement par chaîne de pensée. Consultez Amélioration des réponses des modèles grâce au raisonnement modélisé.
-
Mise en cache rapide : mettez en cache le contexte fréquemment utilisé pour réduire la latence et les coûts.
Pour le format complet de demande et de réponse de l'API Messages, y compris tous les paramètres et fonctionnalités, voirAnthropic Claude API Message.
Comptez les jetons
Pour compter le nombre de jetons d'entrée qu'une demande consommerait avant de l'envoyer pour inférence, utilisez le count_tokens chemin anthropique sur le bedrock-mantle point de terminaison. Il s'agit de la seule méthode de comptage de jetons prise en charge pour les modèles Claude qui ne sont pas disponibles bedrock-runtime avec un Region-specific point de terminaison, y compris les modèles Claude qui se lancent uniquement avec l'inférence interrégionale (CRIS). Pour plus de détails et un exemple, reportez-vous à la section Comptez les jetons en utilisant le point de terminaison Bedrock-Mantle.