Use conjuntos de dados imediatos para avaliação de modelos no Amazon Bedrock

Para criar um trabalho de avaliação de modelo, você deve especificar um conjunto de dados de prompts que o modelo usa durante a inferência. O Amazon Bedrock fornece conjuntos de dados integrados que podem ser usados em avaliações automáticas de modelos, mas você também pode trazer seu próprio conjunto de dados de prompts. Para trabalhos de avaliação de modelo com a participação de operadores humanos, você deve usar seu próprio conjunto de dados de prompts.

Use as seções a seguir para saber mais sobre os conjuntos de dados de prompts integrados disponíveis e sobre como criar conjuntos de dados de prompts personalizados.

Para saber mais sobre como criar seu primeiro trabalho de avaliação de modelo no Amazon Bedrock, consulte Escolha o modelo com melhor desempenho usando as avaliações do Amazon Bedrock.

Tópicos

• Use conjuntos de dados de alerta integrados para avaliação automática de modelos no Amazon Bedrock
• Use um conjunto de dados de prompt personalizado para avaliação do modelo no Amazon Bedrock