翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。
このセクションでは、サンプルコードと説明を含む次のノートブックチュートリアルを提供します。
-
JumpStart モデルのプロンプトのステレオタイプ評価方法
-
Amazon Bedrock モデルのテキスト要約の精度評価方法
追加のノートブック
fmeval GitHub
-
bedrock-claude-factual-knowledge.ipnyb
– 事実に関する知識向けの Amazon Bedrock でホストされている Anthropic Claude 2 モデルを評価します。 -
byo-model-outputs.ipynb
– 事実に関する知識向けの JumpStart でホストされている Falcon 7b モデル を評価します。モデルに推論リクエストを送信する代わりに独自のモデル出力を使用できます。 -
custom_model_runner_chat_gpt.ipnyb
– 事実に関する知識向けの Hugging Face
でホストされているカスタムChatGPT 3.5
モデルを評価します。