によってコピーされるメタデータ AWS DataSync

AWS DataSync転送中のファイルまたはオブジェクトのメタデータの処理方法は、使用しているストレージシステムによって異なります。

注記

DataSyncシステムレベルの設定をコピーしません。たとえば、オブジェクトをコピーする場合、DataSyncストレージシステムの暗号化設定はコピーされません。SMB 共有からコピーする場合、DataSyncファイルシステムレベルで設定した権限はコピーされません。

類似のメタデータ構造を持つシステム間でコピーされるメタデータ

DataSync類似したメタデータ構造を持つストレージシステム間でメタデータを保持します。

NFS

次の表は、ネットワークファイルシステム (NFS) DataSync を使用する場所間でコピーできるメタデータをまとめたものです。

これらの場所間でコピーする場合	DataSyncコピーできます
NFS Amazon EFS Amazon FSx for Lustre Amazon FSx for OpenZFS NetAppONTAP 用 Amazon FSx (NFS を使用)	ファイルとフォルダの変更タイムスタンプ ファイルとフォルダへのアクセスのタイムスタンプ (DataSyncはあくまでベストエフォートベースでこれを行います) ユーザー ID (UID) およびグループ ID (GID) POSIX のアクセス許可

SMB Transfer

次の表は、サーバーメッセージブロック (SMB) DataSync を使用するロケーション間でコピーできるメタデータをまとめたものです。

これらの場所間でコピーする場合

DataSyncコピーできます

SMB Amazon FSx for Windows File Server ONTAP 用 FSx（SMB を使用）

ファイルのタイムスタンプ: アクセス時間、変更時間、作成時間 ファイル所有者のセキュリティ識別子 (SID) 標準ファイル属性:読み取り専用 (R)、アーカイブ (A)、システム (S)、非表示 (H)、圧縮 (C)、コンテンツインデックスなし (I)、暗号化 (E)、テンポラリ (T)、オフライン (O)、スパース (P) DataSyncアーカイブ属性、圧縮属性、スパース属性をコピーしようとします。これらの属性が送信先に適用されていない場合、タスクの検証では無視されます。 注：ONTAP 用 FSx はインデックス作成をサポートしていません。このタイプのファイルシステムに転送する場合、not content indexed (I) DataSync 属性は無視されます。 NTFS 任意アクセスリスト (DACL) は、オブジェクトへのアクセスを許可するかどうかを決定します。 NTFS システムアクセスコントロールリスト (SACL) は、管理者がセキュリティ保護されたオブジェクトへのアクセス試行を記録するために使用されます。 注:SMB バージョン 1.0 を使用する場合、SACL はコピーされません。 DACL と SACL をコピーするには、SMB DataSync を使用してロケーションにアクセスする Windows ユーザーに特定のアクセス許可を付与する必要があります。詳細については、「SMB 用のロケーションの作成」、FSx for Windows File Server、または ONTAP 用の FSx（転送するロケーションのタイプによって異なります）を参照してください。

HDFS

次の表は、Hadoop Distributed File System (HDFS) DataSync の場所を含む転送時にコピーできるメタデータをまとめたものです。

この場所からコピーする場合	次のいずれかの場所へ	DataSyncコピーできます
HDFS	Amazon EFS FSx for Lustre FSx for ZFS ONTAP 用 FSx（NFS を使用）	ファイルとフォルダの変更タイムスタンプ ファイルとフォルダへのアクセスのタイムスタンプ (DataSyncはあくまでベストエフォートベースでこれを行います) POSIX のアクセス許可 HDFS では、数値識別子 (UID や GID など) ではなく、文字列を使用してファイルとフォルダのユーザーとグループの所有権を保存します。UID と GID のデフォルト値は、送信先のファイルシステムに適用されます。デフォルト値の詳細については、「デフォルトの POSIX メタデータをいつ、DataSyncどのように適用するかについての理解」を参照してください。

Amazon S3 Transfer

次の表は、転送に Amazon S3 DataSync ロケーションが含まれる場合にコピーできるメタデータをまとめたものです。

トピック

• Amazon S3
• HDFS
• オブジェクトストレージと Amazon S3 の間

Amazon S3

次のいずれかの場所からコピーする場合	この場所へ	DataSyncコピーできます
NFS Amazon EFS FSx for Lustre FSx for ZFS ONTAP 用 FSx（NFS を使用）	Amazon S3	Amazon S3 のユーザーメタデータとしては以下のとおりです。 ファイルとフォルダの変更タイムスタンプ ファイルとフォルダへのアクセスのタイムスタンプ (DataSyncはあくまでベストエフォートベースでこれを行います) ユーザー ID とグループ ID POSIX のアクセス許可 Amazon S3 ユーザーメタデータに保存されているファイルメタデータは、を使用してファイルゲートウェイの NFS 共有と相互運用できます。AWS Storage Gatewayファイルゲートウェイは、によって Amazon S3 にコピーされたデータへの低レイテンシーアクセスを可能にします。DataSyncこのメタデータは FSx for Lustre とも相互運用できます。 DataSync が、このメタデータを含むオブジェクトを NFS サーバーにコピーして戻す際には、ファイルのメタデータは復元されます。メタデータを復元するには、NFS サーバーに昇格したアクセス許可を付与する必要があります。詳細については、「NFS AWS DataSync ファイルサーバーからの転送の設定」を参照してください。

HDFS

これらの場所間でコピーする場合	DataSyncコピーできます
Hadoop Distributed File System（HDFS） Amazon S3	Amazon S3 のユーザーメタデータとしては以下のとおりです。 ファイルとフォルダの変更タイムスタンプ ファイルとフォルダへのアクセスのタイムスタンプ (DataSyncはあくまでベストエフォートベースでこれを行います) ユーザー ID とグループ ID POSIX のアクセス許可 HDFS では、UID や GID などの数値識別子ではなく、文字列を使用してファイルとフォルダのユーザーとグループの所有権を保存します。

オブジェクトストレージと Amazon S3 の間

これらの場所間でコピーする場合

DataSyncコピーできます

オブジェクトストレージ Amazon S3

ユーザー定義のオブジェクトメタデータ オブジェクトタグ 次のシステムで定義されたオブジェクトメタデータ。 Content-Disposition Content-Encoding Content-Language Content-Type 注記:DataSync初回転送時にすべてのオブジェクトのシステムメタデータをコピーします。変更されたデータのみを転送するようにタスクを設定した場合、オブジェクトのコンテンツまたはユーザーメタデータも変更されていない限り、DataSync以降の転送でシステムメタデータをコピーしません。 DataSyncオブジェクトアクセスコントロールリスト (ACL) や以前のオブジェクトバージョンなど、他のオブジェクトメタデータをコピーしません。 重要:Google Cloud Storage バケットからオブジェクトを転送する場合、DataSyncオブジェクトタグをコピーするとタスクが失敗する可能性があります。これを防ぐには、タスク設定を行うときに「オブジェクトタグをコピー」オプションを選択解除してください。詳細については、「ファイル、オブジェクト、AWS DataSyncメタデータの転送方法の管理」を参照してください。

メタデータ構造が異なるシステム間でコピーされるメタデータ

類似したメタデータ構造を持たないストレージシステム間でコピーする場合、DataSync次のルールを使用してメタデータを処理します。

次のいずれかの場所からコピーする場合	次のいずれかの場所へ	DataSyncコピーできます
SMB FSx for Windows File Server ONTAP 用 FSx（SMB を使用）	Amazon EFS FSx for Lustre FSx for ZFS ONTAP 用 FSx（NFS を使用） Amazon S3 オブジェクトストレージ NFS	宛先ファイルシステム上のすべてのファイルとフォルダ、または宛先 S3 バケット内のオブジェクトのデフォルトの POSIX メタデータ。この方法には、デフォルトの POSIX ユーザー ID とグループ ID の値の使用が含まれます。 Windows ベースのメタデータ (ACL など) は保存されません。
FSx for Windows File Server ONTAP 用 FSx（SMB を使用）	HDFS	送信元の場所からのファイルとフォルダのタイムスタンプ。ファイルまたはフォルダの所有者は、HDFS ユーザーまたは Kerberos プリンシパルに基づいて設定されます。Hadoop クラスターのグループマッピング設定によって、グループが決まります。
Amazon EFS FSx for Lustre FSx for ZFS ONTAP 用 FSx（NFS を使用） Amazon S3 オブジェクトストレージ NFS HDFS	SMB FSx for Windows File Server ONTAP 用 FSx（SMB を使用）	送信元の場所からのファイルとフォルダのタイムスタンプ。所有権は、Amazon FSx または SMB DataSync 共有にアクセスするために指定された Windows ユーザーに基づいて設定されます。権限は親ディレクトリから継承されます。

デフォルトの POSIX メタデータをいつ、DataSyncどのように適用するかについての理解

DataSync次の場合にデフォルトの POSFS メタデータを適用します。

• 転送元と転送先のメタデータ構造が似ていない場合

• ソースの場所にメタデータが欠落している場合

次の表は、これらの種類の転送時にデフォルトの POSIX DataSync メタデータをどのように適用するかを説明しています。

ソース	送信先	ファイルのアクセス許可	フォルダーの権限	UID	GID
Amazon S3 1 オブジェクトストレージ 1	Amazon EFS FSx for Lustre FSx for ZFS ONTAP 用 FSx（NFS を使用） NFS	0755	0755	65534	65534
SMB	Amazon S3 オブジェクトストレージ Amazon EFS FSx for Lustre FSx for ZFS ONTAP 用 FSx（NFS を使用） NFS	0644	0755	0	0
HDFS	Amazon EFS FSx for Lustre FSx for ZFS ONTAP 用 FSx（NFS を使用） NFS	0644	0755	0	0

¹ オブジェクトに以前に適用されたメタデータがない場合DataSync。

注記

HDFS では、数値識別子 (UID や GID など) ではなく、文字列を使用してファイルとフォルダのユーザーとグループの所有権を保存します。送信元の場所に同等のメタデータがない場合、場所の作成時に指定した HDFS ユーザーまたは Kerberos プリンシパルに基づいて、ファイルとフォルダの所有権が設定されます。DataSyncHadoop クラスターのグループマッピング設定によって、グループが決まります。