SerDe リファレンス
Athena は、CSV、JSON、Parquet、ORC などのさまざまなデータ形式からデータを解析する複数の SerDe (シリアライザー/デシリアライザー) ライブラリをサポートしています。Athena でテーブルを作成する際に、データの形式に対応する SerDe を指定できます。Athena はカスタム SerDe をサポートしません。
SerDe を使用してテーブルを作成するには
Athena でテーブルを作成するときに SerDe を使用するには、以下の方法のいずれかを使用します。
-
以下の例にあるように、
ROW FORMAT DELIMITEDを指定してから、DDL ステートメントを使用してフィールド区切り文字を指定します。ROW FORMAT DELIMITEDを指定すると、Athena がデフォルトで LazySimpleSerDe を使用します。ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' ESCAPED BY '\\' COLLECTION ITEMS TERMINATED BY '|' MAP KEYS TERMINATED BY ':'ROW FORMAT DELIMITEDの例については、次のトピックを参照してください。 -
ROW FORMAT SERDEは、テーブルへのデータの読み書きを行うときに Athena が使用する必要がある SerDe のタイプを明示的に指定します。以下の例は、LazySimpleSerDe を指定しています。区切り文字を指定するには、WITH SERDEPROPERTIESを使用します。WITH SERDEPROPERTIESによって指定されたプロパティは、ROW FORMAT DELIMITED例の個別のステートメント (FIELDS TERMINATED BYなど) に対応します。ROW FORMAT SERDE 'org.apache.hadoop.hive.serde2.lazy.LazySimpleSerDe' WITH SERDEPROPERTIES ( 'serialization.format' = ',', 'field.delim' = ',', 'collection.delim' = '|', 'mapkey.delim' = ':', 'escape.delim' = '\\' )ROW FORMAT SERDEの例については、次のトピックを参照してください。
