オブジェクトストレージシステムを使用した DataSync 転送の設定

を使用すると AWS DataSync、オブジェクトストレージシステムと次のいずれかの AWS ストレージサービスとの間でデータを転送できます。

このタイプの転送を設定するには、オブジェクトストレージシステムのロケーションを作成します。このロケーションは送信元または送信先として使用できます。

前提条件

オブジェクトストレージシステムは、DataSyncが接続するための以下の Amazon S3 API オペレーションと互換性がある必要があります。

AbortMultipartUpload
CompleteMultipartUpload
CopyObject
CreateMultipartUpload
DeleteObject
DeleteObjects
DeleteObjectTagging
GetBucketLocation
GetObject
GetObjectTagging
HeadBucket
HeadObject
ListObjectsV2
PutObject
PutObjectTagging
UploadPart

オブジェクトストレージの転送ロケーションの作成

開始する前に、データの送信先または送信先となるオブジェクトストレージシステムを作成する必要があります。

https://console.aws.amazon.com/datasync/ で AWS DataSync コンソールを開きます。
左側のナビゲーションペインで [データ転送] を展開し、[場所] と [場所を作成する] を選択します。
場所タイプで、オブジェクトストレージを選択します。

後でこのロケーションを送信元あるいは送信先として設定します。
[エージェント] で、クラウドオブジェクトストレージに接続できる DataSync エージェントを選択します。

エージェントは複数選択できます。詳細については、「複数の DataSync エージェントの使用」を参照してください。
[サーバー] には、オブジェクトストレージサーバーのドメイン名または IP アドレスを指定します。
[バケット名] には、転送に関係するオブジェクトストレージバケットの名前を指定します。
[フォルダ] には、オブジェクトプレフィックスを入力します。

DataSync は、このプレフィックスを持つオブジェクトのみをコピーします。
オブジェクトストレージサーバーへの接続を設定するには、[その他の設定] を展開して以下の操作を行います。
1. [サーバープロトコル] で、[HTTP] または [HTTPS] を選択します。
2. [サーバーポート] には、デフォルトのポート (HTTP の場合は 80、HTTPS の場合は 443) を使用するか、必要に応じてカスタムポートを指定します。
3. [証明書] で、オブジェクトストレージシステムがプライベートまたは自己署名認証局 (CA) を使用している場合は、[ファイルを選択] を選択し、完全な証明書チェーンを持つ単一の .pem ファイルを指定します。
  
  証明書チェーンには以下が含まれます。
  - オブジェクトストレージシステムの証明書
  - すべての中間証明書 (存在する場合)
  - 署名 CA のルート証明書
  証明書を .pem ファイルに連結できます (base64 エンコーディングの前は最大 32,768 バイトまで可能)。次の cat コマンド例では、3 つの証明書を含む object_storage_certificates.pem ファイルを作成します。
```
cat object_server_certificate.pem intermediate_certificate.pem ca_root_certificate.pem > object_storage_certificates.pem
```
オブジェクトストレージサーバーにアクセスするために認証情報が必要な場合は、[認証情報が必要] を選択し、バケットへのアクセスに必要な [アクセスキー] と [シークレットキー]]を入力します。

アクセスキーとシークレットキーは、それぞれユーザー名とパスワードとすることもできます。
(オプション) [タグを追加] を選択して、オブジェクトストレージロケーションにタグ付けします。

タグは、ロケーションの管理、フィルタリング、検索に役立つキーバリューペアです。少なくとも場所の名前タグを作成することを推奨します。
[ロケーションを作成] を選択します。

次の create-location-object-storage コマンドをコピーします。


aws datasync create-location-object-storage \
    --server-hostname object-storage-server.example.com \
    --bucket-name your-bucket \
    --agent-arns arn:aws:datasync:us-east-1:123456789012:agent/agent-01234567890deadfb

コマンドに以下の必須パラメータを指定します。
- --server-hostname - オブジェクトストレージサーバーのドメイン名または IP アドレスを指定します。
- --bucket-name – 転送先または転送元のオブジェクトストレージサーバー上のバケットの名前を指定します。
- --agent-arns – オブジェクトストレージサーバーに接続する DataSync エージェントを指定します。
(オプション) 次のいずれかのパラメータをコマンドに追加します。
- --server-port - オブジェクトストレージサーバーがインバウンドネットワークトラフィックを受け入れるポート (ポート 443 など) を指定します。
- --server-protocol - オブジェクトストレージサーバーが通信に使用するプロトコル (HTTP または HTTPS) を指定します。
- --access-key - オブジェクトストレージサーバーとの認証に認証情報が必要な場合、アクセスキー (ユーザー名など) を指定します。
- --secret-key - オブジェクトストレージサーバーとの認証に認証情報が必要な場合、秘密鍵 (パスワードなど) を指定します。
- --server-certificate - オブジェクトストレージシステムがプライベートまたは自己署名の認証機関 (CA) を使用する場合、DataSync がそのシステムで認証するための証明書チェーンを指定します。完全な証明書チェーンを持つ .pem ファイルを 1 つ指定する必要があります (例: file:///home/user/.ssh/object_storage_certificates.pem)。
  
  証明書チェーンには以下が含まれます。
  - オブジェクトストレージシステムの証明書
  - すべての中間証明書 (存在する場合)
  - 署名 CA のルート証明書
  証明書を .pem ファイルに連結できます (base64 エンコーディングの前は最大 32,768 バイトまで可能)。次の cat コマンド例では、3 つの証明書を含む object_storage_certificates.pem ファイルを作成します。
```
cat object_server_certificate.pem intermediate_certificate.pem ca_root_certificate.pem > object_storage_certificates.pem
```
- --subdirectory - オブジェクトストレージサーバーのオブジェクトプレフィックスを指定します。
  
  DataSync は、このプレフィックスを持つオブジェクトのみをコピーします。
- --tags - リソースに追加するタグを表すキーと値のペアを指定します。
  
  タグは、リソースの管理、フィルタリング、検索に役立ちます。場所の名前タグを作成することを推奨します。
create-location-object-storage コマンドを実行します。

先ほど作成した場所の ARN を示す応答が表示されます。
```
{
    "LocationArn": "arn:aws:datasync:us-east-1:123456789012:location/loc-01234567890abcdef"
}
```

ブラウザで JavaScript が無効になっているか、使用できません。

AWS ドキュメントを使用するには、JavaScript を有効にする必要があります。手順については、使用するブラウザのヘルプページを参照してください。

ドキュメントの表記規則

HDFS クラスターを使用した転送の設定

AWS ストレージとの間での転送