Menggunakan Alur dengan Sumber Daya di Beberapa Wilayah

Secara default, sumber daya Ec2Resource dan EmrCluster berjalan di wilayah yang sama dengan AWS Data Pipeline, namun AWS Data Pipeline mendukung kemampuan untuk mengatur aliran data di beberapa wilayah, seperti menjalankan sumber daya di satu wilayah yang menggabungkan data input dari wilayah lain. Dengan mengizinkan sumber daya untuk menjalankan wilayah tertentu, Anda juga memiliki fleksibilitas untuk mengkolokasi sumber daya Anda bersama dengan set data dependennya dan memaksimalkan performa dengan mengurangi latensi dan menghindari biaya transfer data lintas wilayah. Anda dapat mengonfigurasi sumber daya untuk berjalan di wilayah yang berbeda dari AWS Data Pipeline dengan menggunakan bidang region pada Ec2Resource dan EmrCluster.

Contoh file JSON alur berikut menunjukkan cara menjalankan sumber daya EmrCluster di wilayah Europe (Ireland), dengan asumsi bahwa sejumlah besar data untuk klaster yang akan dikerjakan ada di wilayah yang sama. Dalam contoh ini, satu-satunya perbedaan dari alur khas adalah bahwa EmrCluster memiliki nilai bidang region yang diatur ke eu-west-1.

{
  "objects": [
    {
      "id": "Hourly",
      "type": "Schedule",
      "startDateTime": "2014-11-19T07:48:00",
      "endDateTime": "2014-11-21T07:48:00",
      "period": "1 hours"
    },
    {
      "id": "MyCluster",
      "type": "EmrCluster",
      "masterInstanceType": "m3.medium",
      "region": "eu-west-1",
      "schedule": {
        "ref": "Hourly"
      }
    },
    {
      "id": "MyEmrActivity",
      "type": "EmrActivity",
      "schedule": {
        "ref": "Hourly"
      },
      "runsOn": {
        "ref": "MyCluster"
      },
      "step": "/home/hadoop/contrib/streaming/hadoop-streaming.jar,-input,s3n://elasticmapreduce/samples/wordcount/input,-output,s3://eu-west-1-bucket/wordcount/output/#{@scheduledStartTime},-mapper,s3n://elasticmapreduce/samples/wordcount/wordSplitter.py,-reducer,aggregate"
    }
  ]
}

Tabel berikut mencantumkan wilayah yang dapat Anda pilih dan kode wilayah terkait untuk digunakan di bidang region.

catatan

Daftar berikut mencakup wilayah tempat AWS Data Pipeline dapat mengatur alur kerja dan meluncurkan sumber daya Amazon EMR atau Amazon EC2. AWS Data Pipeline mungkin tidak didukung di wilayah ini. Untuk informasi tentang wilayah di mana AWS Data Pipeline didukung, lihat Titik Akhir dan Wilayah AWS.

Nama Wilayah	Kode Wilayah
US East (Northern Virginia)	us-east-1
US East (Ohio)	us–east-2
US West (Northern California)	us-west-1
US West (Oregon)	us-west-2
Canada (Central)	ca-central-1
Eropa (Irlandia)	eu-west-1
Europe (London)	eu-west-2
Eropa (Frankfurt)	eu-central-1
Asia Pacific (Singapore)	ap-southeast-1
Asia Pacific (Sydney)	ap-southeast-2
Asia Pasifik (Mumbai)	ap-south-1
Asia Pacific (Tokyo)	ap-northeast-1
Asia Pacific (Seoul)	ap-northeast-2
South America (São Paulo)	sa-east-1