Verwenden Sie ein benutzerdefiniertes Modell

Bevor Sie ein benutzerdefiniertes Modell verwenden können, müssen Sie Provisioned Throughput dafür erwerben. Weitere Informationen zu Provisioned Throughput finden Sie unter. Bereitgestellter Durchsatz für Amazon Bedrock Sie können dann das resultierende bereitgestellte Modell als Inferenz verwenden. Wählen Sie die Registerkarte aus, die der Methode Ihrer Wahl entspricht, und folgen Sie den Schritten.

Console

So erwerben Sie bereitgestellten Durchsatz für ein benutzerdefiniertes Modell

1. Wählen Sie in der Amazon Bedrock-Konsole im linken Navigationsbereich unter Foundation-Modelle die Option Benutzerdefinierte Modelle aus.

2. Wählen Sie auf der Registerkarte Modelle das Optionsfeld neben dem Modell aus, für das Sie Provisioned Throughput erwerben möchten, oder wählen Sie den Modellnamen aus, um zur Detailseite zu gelangen.

3. Wählen Sie Provisioned Throughput kaufen aus.

4. Folgen Sie den Schritten unter, um weitere Informationen zu Erwerben Sie einen bereitgestellten Durchsatz für ein Amazon Bedrock-Modell erhalten.

5. Folgen Sie nach dem Kauf von Provisioned Throughput für Ihr benutzerdefiniertes Modell den Schritten unterInferenz mit einem bereitgestellten Durchsatz ausführen.

Wenn Sie einen Vorgang ausführen, der die Verwendung benutzerdefinierter Modelle unterstützt, wird Ihr benutzerdefiniertes Modell als Option im Modellauswahlmenü angezeigt.

API

Um Provisioned Throughput für ein benutzerdefiniertes Modell Erwerben Sie einen bereitgestellten Durchsatz für ein Amazon Bedrock-Modell zu erwerben, folgen Sie den Schritten unter So senden Sie eine Anfrage CreateProvisionedModelThroughput(siehe Link für Anfrage- und Antwortformate und Felddetails) mit einem Amazon Bedrock Control Plane-Endpunkt. Verwenden Sie den Namen oder ARN Ihres benutzerdefinierten Modells alsmodelId. Die Antwort gibt eine zurückprovisionedModelArn, die Sie als Antwort verwenden könnenmodelId, wenn Sie eine InvokeModelInvokeModelWithResponseStreamOder-Anfrage stellen.

Siehe Codebeispiele