2023 年 12 月 7 日より、バージョン 1 DataSync のエージェントは廃止されます。 DataSync コンソールの [エージェント] ページをチェックして、影響を受けるエージェントがいないか確認してください。その場合は、データ転送やストレージ検出の中断を避けるため、その前にそれらのエージェントを交換してください。さらにサポートが必要な場合は、お問い合わせくださいAWS Support
翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。
メタデータはによってコピーされました AWS DataSync
AWS DataSyncデータ転送中もファイルやオブジェクトのメタデータを保存できます。メタデータのコピー方法は、転送先と、それらの場所で同様の種類のメタデータが使用されているかどうかによって異なります。
システムレベルのメタデータ
一般に、 DataSync システムレベルのメタデータはコピーしません。たとえば、SMB ファイルサーバから転送する場合、ファイルシステムレベルで構成した権限は転送先のストレージシステムにコピーされません。
例外もあります。Amazon S3 と他のオブジェクトストレージ間で転送する場合、 DataSync システム定義のオブジェクトメタデータをコピーします。
Amazon S3 転送でコピーされたメタデータ
次の表は、転送に Amazon S3 DataSync ロケーションが含まれる場合にコピーできるメタデータをまとめたものです。
Amazon S3 へ
これらの場所のいずれかからコピーする場合 | この場所へ | DataSync コピーできます |
---|---|---|
|
|
Amazon S3 ユーザーメタデータとしては以下のとおりです。
Amazon S3 ユーザーメタデータに保存されているファイルメタデータは、を使用するファイルゲートウェイ上の NFS 共有と相互運用可能です。AWS Storage Gatewayファイルゲートウェイを使用すると、オンプレミスネットワークから Amazon S3 にコピーされたデータに低レイテンシーでアクセスできます。 DataSyncこのメタデータは FSx for Lustre とも相互運用可能です。 このメタデータを含むオブジェクトを NFS DataSync サーバーにコピーすると、ファイルメタデータが復元されます。メタデータを復元するには、NFS サーバーに昇格したアクセス許可を付与する必要があります。詳細については、「NFS AWS DataSync ファイルサーバによる転送の設定」を参照してください。 |
Amazon S3 と他のオブジェクトストレージ間
これらの場所間でコピーする場合 | DataSync コピーできる |
---|---|
|
DataSync オブジェクトアクセス制御リスト (ACL)、以前のオブジェクトバージョン、Last-Modified キーなど、他のオブジェクトメタデータはコピーされません。 |
|
Amazon S3 と HDFS の間
これらの場所間でコピーする場合 | DataSync コピーできる |
---|---|
|
Amazon S3 ユーザーメタデータとしては以下のとおりです。
|
NFS 転送でコピーされたメタデータ
次の表は、ネットワークファイルシステム (NFS) DataSync を使用する場所間でコピーできるメタデータをまとめたものです。
これらの場所間でコピーする場合 | DataSync コピーできる |
---|---|
|
|
SMB 転送でコピーされたメタデータ
次の表は、サーバーメッセージブロック (SMB) DataSync を使用する場所間でコピーできるメタデータをまとめたものです。
これらのロケーション間でコピーする場合 | DataSync コピーできる |
---|---|
|
|
他の転送シナリオでコピーされたメタデータ
DataSync これらのストレージシステム (ほとんどはメタデータ構造が異なる) 間でコピーする場合、メタデータを次のように処理します。
これらの場所のいずれかからコピーする場合 | 以下のいずれかの場所へ | DataSync コピーできます |
---|---|---|
|
|
デスティネーションファイルシステム上のすべてのファイルとフォルダ、またはデスティネーション S3 バケット内のオブジェクトのデフォルト POSIX メタデータ。この方法には、デフォルトの POSIX ユーザー ID とグループ ID の値の使用が含まれます。 Windows ベースのメタデータ (ACL など) は保持されません。 |
|
|
ターゲットファイルおよびフォルダのデフォルト POSIX メタデータ。この方法には、デフォルトの POSIX ユーザー ID とグループ ID の値の使用が含まれます。 |
|
|
以下はユーザー定義のメタデータです。
|
|
|
HDFS は、ファイルとフォルダーのユーザーとグループの所有権を、数値識別子 (UID や GID など) ではなく文字列として保存します。UID と GID のデフォルト値は、デスティネーションファイルシステムに適用されます。詳細については、「デフォルト POSIX DataSync メタデータをいつどのように適用するかを理解する」を参照してください。 |
|
|
ソースロケーションのファイルとフォルダーのタイムスタンプ。ファイルまたはフォルダーの所有者は、HDFS 転送場所の作成時に指定した HDFS ユーザーまたは Kerberos プリンシパルに基づいて設定されます。Hadoop クラスターのグループマッピング設定によって、グループが決まります。 |
|
|
ソースロケーションのファイルとフォルダのタイムスタンプ。所有権は、Amazon FSx または SMB DataSync 共有にアクセスするためにで指定された Windows ユーザーに基づいて設定されます。権限は親ディレクトリから継承されます。 |
|
|
デフォルト POSIX DataSync メタデータをいつどのように適用するかを理解する
DataSync デフォルト POSIX メタデータを以下の状況で適用します。
-
転送元の場所と転送先の場所のメタデータ構造が似ていない場合
-
転送元の場所にメタデータが欠落している場合
次の表は、これらの種類の転送時にデフォルトの POSIX DataSync メタデータをどのように適用するかを示しています。
ソース | 送信先 | ファイルのアクセス許可 | フォルダーの権限 | UID | GID |
---|---|---|---|---|---|
|
|
0755 |
0755 |
65534 |
65534 |
|
|
0644 |
0755 |
0 |
0 |
|
|
0644 |
0755 |
0 |
0 |
1 以前にによって適用されたメタデータがオブジェクトに含まれていない場合。 DataSync