Amazon SageMaker AI RL による分散トレーニング

Amazon SageMaker AI RL は、マルチコアおよびマルチインスタンスの分散トレーニングをサポートしています。ユースケースによっては、トレーニングや環境ロールアウトを分散できます。例えば、SageMaker AI RL は、次の分散シナリオで動作します。

• 単一のトレーニングインスタンスと同じインスタンスタイプの複数のロールアウトインスタンス。例については、SageMaker AI サンプルリポジトリのニューラルネットワーク圧縮の例を参照してください。

• トレーニングとロールアウトのさまざまなインスタンスタイプが存在する、単一トレーナーインスタンスと複数のロールアウトインスタンス。例については、SageMaker AI サンプルリポジトリの DeepRacer /RoboMaker の例を参照してください AWS 。 AWS RoboMaker SageMaker

• ロールアウトに複数のコアを使用する、単一のトレーナーインスタンス。例については、SageMaker AI サンプルリポジトリの Roboschool の例を参照してください。これは、シミュレーション環境が軽く、単一スレッドで実行できる場合、便利です。

• トレーニングとロールアウトの複数のインスタンス。例については、SageMaker AI サンプルリポジトリの Roboschool の例を参照してください。