モデルリーダーボードでモデル候補を表示する

Amazon Canvas で表形式予測モデルと時系列予測モデルの標準ビルドを実行すると、 SageMaker は複数のモデル候補 (モデルの異なる反復) を SageMaker トレーニングし、デフォルトでは最適化メトリクスの値が最も大きいモデルを選択します。表形式モデルの場合、Canvas はさまざまなアルゴリズムとハイパーパラメータ設定を使用して最大 250 の異なるモデル候補を構築します。時系列予測モデルの場合、Canvas は 7 つの異なるモデルを構築します。1 つはサポートされている予測アルゴリズムごとに、もう 1 つは精度を最適化するために他のモデルの予測を平均化するアンサンブルモデルです。

デフォルトのモデル候補は、予測の作成、モデルレジストリへの登録、エンドポイントへのデプロイなどのアクションに Canvas で使用できる唯一のバージョンです。ただし、すべてのモデル候補を確認し、デフォルトモデルとして別の候補を選択することもできます。Canvas のモデルリーダーボードで、すべてのモデル候補と各候補に関する詳細を表示できます。

モデルリーダーボードを表示するには、次の手順を実行します。

1. Canvas SageMaker アプリケーションを開きます。

2. 左側のナビゲーションペインで [自分のモデル] を選択します。

3. 構築したモデルを選択します。

4. ナビゲーションペインで、[分析] タブを選択します。

5. 分析タブで、モデルリーダーボードを選択します。

モデルリーダーボードページが開き、表形式のモデルは次のスクリーンショットのようになります。

時系列予測モデルでは、7 つのモデルが表示されます。これには、Canvas でサポートされている時系列予測アルゴリズムごとに 1 つと 1 つのアンサンブルモデルが含まれます。アルゴリズムの詳細については、「高度な時系列予測モデル設定」を参照してください。

前のスクリーンショットでは、リストされた最初のモデル候補がデフォルトモデル としてマークされていることがわかります。これは、予測を行ったり、エンドポイントにデプロイしたりできるモデル候補です。

比較するモデル候補に関するより詳細なメトリクス情報を表示するには、詳細オプションアイコン ( ) を選択し、モデルの詳細を表示 を選択します。

重要

デフォルト以外のモデル候補のモデル詳細のロードには数分 (通常は 10 分未満) かかる場合があり、 SageMaker ホスティング料金が適用されます。詳細については、「 のSageMaker料金」を参照してください。

分析タブでモデル候補が開き、表示されるメトリクスはそのモデル候補に固有です。モデル候補のメトリクスの確認が完了したら、ビューに戻ってモデルリーダーボード に戻るか、ビューを終了して戻ることができます。

デフォルトモデルを別の候補に設定する場合は、追加オプションアイコン ( ) を選択し、デフォルトモデルに変更 を選択します。HPO モードを使用してトレーニングされたモデルのデフォルトモデルを変更すると、数分かかる場合があります。

注記

モデルがすでに本番環境にデプロイされているか、モデルレジストリ に登録されているか、オートメーションが設定されている場合は、デフォルトのモデルを変更する前に、デプロイ、モデル登録、またはオートメーションを削除する必要があります。