AWS Data Pipeline は、新規顧客には利用できなくなりました。の既存のお客様は、通常どおりサービスを AWS Data Pipeline 引き続き使用できます。詳細はこちら
翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。
デフォルトでは、 Ec2Resource
および EmrCluster
リソースは と同じリージョンで実行されますが AWS Data Pipeline、 は、別のリージョンからの入力データを統合する 1 つのリージョンでリソースを実行するなど、複数のリージョンのデータフローを調整する機能 AWS Data Pipeline をサポートしています。指定したリージョンでリソースを実行できることで、依存するデータセットとリソースを同じ場所に配置する柔軟性がもたらされます。また、レイテンシーを減らすとともにクロスリージョンのデータ転送料金を回避することで、パフォーマンスを最大化することができます。リソースは、 Ec2Resource
および の region
フィールド AWS Data Pipeline を使用して、 とは異なるリージョンで実行するように設定できますEmrCluster
。
次の例のパイプライン JSON ファイルは、ヨーロッパ (アイルランド) リージョンの EmrCluster
リソースを実行する方法を示します。このとき、作業するクラスターの大量のデータが同じリージョンに存在することを前提としています。この例では、一般的なパイプラインとの唯一の違いは、EmrCluster
の region
フィールドの値が eu-west-1
に設定されていることです。
{
"objects": [
{
"id": "Hourly",
"type": "Schedule",
"startDateTime": "2014-11-19T07:48:00",
"endDateTime": "2014-11-21T07:48:00",
"period": "1 hours"
},
{
"id": "MyCluster",
"type": "EmrCluster",
"masterInstanceType": "m3.medium",
"region": "eu-west-1",
"schedule": {
"ref": "Hourly"
}
},
{
"id": "MyEmrActivity",
"type": "EmrActivity",
"schedule": {
"ref": "Hourly"
},
"runsOn": {
"ref": "MyCluster"
},
"step": "/home/hadoop/contrib/streaming/hadoop-streaming.jar,-input,s3n://elasticmapreduce/samples/wordcount/input,-output,s3://eu-west-1-bucket/wordcount/output/#{@scheduledStartTime},-mapper,s3n://elasticmapreduce/samples/wordcount/wordSplitter.py,-reducer,aggregate"
}
]
}
次の表は、選択できるリージョンと region
フィールドで使用する関連リージョンコードの一覧です。
注記
次のリストには、 がワークフローをオーケストレーションし、Amazon EMR または Amazon EC2 リソースを起動 AWS Data Pipeline できるリージョンが含まれています。これらのリージョンでは、 がサポートされていない AWS Data Pipeline 場合があります。 AWS Data Pipeline がサポートされているリージョンの詳細については、「AWS のリージョンとエンドポイント」を参照してください。
リージョン名 | リージョンコード |
---|---|
米国東部 (バージニア北部) | us-east-1 |
米国東部 (オハイオ) | us-east-2 |
米国西部 (北カリフォルニア) | us-west-1 |
米国西部 (オレゴン) | us-west-2 |
カナダ (中部) | ca-central-1 |
欧州 (アイルランド) | eu-west-1 |
欧州 (ロンドン) | eu-west-2 |
欧州 (フランクフルト) | eu-central-1 |
アジアパシフィック (シンガポール) | ap-southeast-1 |
アジアパシフィック (シドニー) | ap-southeast-2 |
アジアパシフィック (ムンバイ) | ap-south-1 |
アジアパシフィック (東京) | ap-northeast-1 |
アジアパシフィック (ソウル) | ap-northeast-2 |
南米 (サンパウロ) | sa-east-1 |