ドキュメント履歴 - AWS Data Pipeline

AWS Data Pipeline は、新規顧客には利用できなくなりました。の既存のお客様 AWS Data Pipeline は、通常どおりサービスを引き続き使用できます。詳細はこちら

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

ドキュメント履歴

このドキュメントは、 の 2012-10-29 バージョンに関連付けられています AWS Data Pipeline。

変更 説明 リリース日
AWS Data Pipeline は新規顧客には利用できなくなりました

AWS Data Pipeline は、新規顧客には利用できなくなりました。の既存のお客様は、通常どおりサービスを AWS Data Pipeline 引き続き使用できます。詳細はこちら

2025 年 7 月 25 日
を使用して特定の手順を実行するためのドキュメントを追加しました AWS CLI。 AWS Data Pipeline コンソール関連の手順を削除しました。

詳細については、パイプラインのクローン作成パイプラインのログの表示、およびCLI を使用して Data Pipeline テンプレートからパイプラインを作成するを参照してください。

2023年5月26日
から他の代替サービスに移行 AWS Data Pipeline するためのコンテンツとサンプルを追加しました。

AWS Glue、 AWS Step Functions、または Amazon のいずれか AWS Data Pipeline に移行するためのトピックを更新MWAAし、各代替、サービス間の概念マッピング、サンプルに関する詳細情報を追加しました。詳細については、「からのワークロードの移行 AWS Data Pipeline」を参照してください。

2023年3月31日
AWS Data Pipeline のサポートに関する情報を追加しましたIMDSv2。

AWS Data Pipeline は、Amazon EMR および Amazon EC2リソースIMDSv2の をサポートします。詳細については、AWS Data Pipeline でのデータ保護EmrCluster、およびEc2Resourceを参照してください。

2022年12月16日
から他の代替サービス AWS Data Pipeline への移行に関するトピックを追加しました。

現在、お客様により良いデータ統合エクスペリエンスを提供する他の AWS サービスがあります。の一般的なユースケース AWS Data Pipeline は、、 AWS Step Functions AWS Glue、または Amazon に移行できますMWAA。詳細については、「からのワークロードの移行 AWS Data Pipeline」を参照してください。

2022年12月16日

サポートされている Amazon EC2および Amazon EMRインスタンスのリストを更新しました。

インスタンスAMIsに使用される HVM (ハードウェア仮想マシン) IDsのリストを更新しました。

サポートされている Amazon EC2および Amazon EMRインスタンスのリストを更新しました。詳細については、「パイプラインの作業アクティビティ用にサポートされているインスタンスタイプ」を参照してください。

インスタンスAMIsに使用される HVM (ハードウェア仮想マシン) IDsのリストを更新しました。詳細については、「構文」を参照し、imageIdを検索してください。

2018年11月9日
Amazon EBSボリュームをクラスターノードにアタッチし、Amazon EMRクラスターをプライベートサブネットに起動するための設定を追加しました。

EMRcluster オブジェクトに設定オプションを追加しました。これらのオプションは、Amazon EMRクラスターを使用するパイプラインで使用できます。

coreEbsConfiguration、、および TaskEbsConfigurationフィールドを使用してmasterEbsConfiguration、Amazon EMRクラスターのコアノード、マスターノード、およびタスクノードへの Amazon EBSボリュームのアタッチメントを設定します。詳細については、「クラスターノードにEBSボリュームをアタッチする」を参照してください。

emrManagedMasterSecurityGroupIdemrManagedSlaveSecurityGroupId、および ServiceAccessSecurityGroupIdフィールドを使用して、プライベートサブネットに Amazon EMRクラスターを設定します。詳細については、「プライベートサブネットで Amazon EMRクラスターを設定する」を参照してください。

EMRcluster 構文の詳細については、「EmrCluster」を参照してください。

2018年4月19日
サポートされている Amazon EC2および Amazon EMRインスタンスのリストを追加しました。

パイプライン定義でインスタンスタイプを指定しない場合に、 がデフォルトで AWS Data Pipeline 作成するインスタンスのリストを追加しました。サポートされている Amazon EC2および Amazon EMRインスタンスのリストを追加しました。詳細については、「パイプラインの作業アクティビティ用にサポートされているインスタンスタイプ」を参照してください。

2018年3月22日
オンデマンドパイプラインのサポートを追加しました。
  • パイプラインを再アクティブ化することで再実行できるオンデマンドパイプラインのサポートが追加されました。

2016年2月22日
RDS データベースの追加サポート
  • rdsInstanceIdregion、およびjdbcDriverJarUriRdsDatabaseに追加されました。

  • RdsDatabaseもサポートするためにSqlActivity内のdatabaseが更新されました。

2015年8月17日
その他のJDBCサポート
2015年7月7日
HadoopActivity、アベイラビリティーゾーン、スポットサポート
  • Hadoopクラスターに並列作業を送信できるようになりました。詳細については、「HadoopActivity」を参照してください。

  • Ec2ResourceEmrClusterで使用するスポットインスタンスをリクエストする機能が追加されました。

  • 指定したアベイラビリティーゾーンでEmrClusterリソースを起動する機能を追加しました。

2015年6月1日
パイプラインの非アクティブ化

アクティブなパイプラインの非アクティブ化のサポートが追加されました。詳細については、「パイプラインの非アクティブ化」を参照してください。

2015年4月7日
更新されたテンプレートとコンソール

新しいテンプレートを追加しました。テンプレートの開始方法を使用するように開始方法 ShellCommandActivityの章を更新しました。詳細については、「CLI を使用して Data Pipeline テンプレートからパイプラインを作成する」を参照してください。

2014年11月25日
VPC サポート

仮想プライベートクラウド () でリソースを起動するためのサポートを追加しましたVPC。

2014年3月12日
リージョンのサポート

複数サービスリージョンのサポートを追加しました。に加えてus-east-1、 AWS Data Pipeline は eu-west-1、、ap-northeast-1ap-southeast-2および でサポートされていますus-west-2

2014年2月20日
Amazon Redshiftサポート

で Amazon Redshift のサポートが追加されました。これには AWS Data Pipeline、新しいコンソールテンプレート (Redshift にコピー) と、テンプレートをデモンストレーションするためのチュートリアルが含まれます。詳細については、「AWS Data Pipeline を使用した Amazon Redshift へのデータのコピー」、「RedshiftDataNode」、「RedshiftDatabase」、および「RedshiftCopyActivity」を参照してください。

2013年11月6日
PigActivity

Pig のネイティブサポート PigActivityを提供する を追加しました。詳細については、「PigActivity」を参照してください。

2013年10月15日
新しいコンソールテンプレート、アクティビティ、およびデータ形式

新しい HiveCopyActivity と D を含む新しい CrossRegion DynamoDB Copy コンソールテンプレートを追加しましたynamoDBExportDataFormat。

2013年8月21日
カスケードの失敗と再実行

AWS Data Pipeline カスケード障害と再実行動作に関する情報を追加しました。詳細については、「カスケードの失敗と再実行」を参照してください。

2013年8月8日
トラブルシューティングの動画

AWS Data Pipeline 基本的なトラブルシューティングビデオを追加しました。詳細については、「トラブルシューティング」を参照してください。

2013年7月17日
アクティブなパイプラインの編集

アクティブなパイプラインの編集およびパイプラインコンポーネントの再実行に関する詳細情報が追加されました。詳細については、「パイプラインの編集」を参照してください。

2013年7月17日
異なるリージョンでのリソースの使用

異なるリージョン内のリソースの使用に関する詳細情報を追加しました。詳細については、「複数のリージョンにあるリソースとパイプラインの使用」を参照してください。

2013年6月17日
WAITING_ON_DEPENDENCIES ステータス

CHECKING_PRECONDITIONS ステータスが WAITING_ON_DEPENDENCIES に変更され、パイプラインオブジェクトの @waitingOn runtime フィールドが追加されました。

2013年5月20日
D ynamoDBData形式

D ynamoDBData形式テンプレートを追加しました。

2013年4月23日
ウェブログの処理に関する動画とスポットインスタンスサポート

「Process Web Logs with AWS Data Pipeline, Amazon EMR, and Hive」ビデオと Amazon EC2スポットインスタンスのサポートを紹介しました。

2013年2月21日

AWS Data Pipeline デベロッパーガイドの初回リリース。

2012年12月20日