MonthName classe

A MonthName transformação cria uma nova coluna contendo o nome do mês, a partir de uma string que representa uma data.

Exemplo

from pyspark.context import SparkContext
from pyspark.sql import SparkSession
from awsgluedi.transforms import *

sc = SparkContext()
spark = SparkSession(sc)

spark.conf.set("spark.sql.legacy.timeParserPolicy", "LEGACY")

input_df = spark.createDataFrame(
    [
        ("20-2018-12",),
        ("2018-20-12",),
        ("20182012",),
        ("12202018",),
        ("20122018",),
        ("20-12-2018",),
        ("12/20/2018",),
        ("02/02/02",),
        ("02 02 2009",),
        ("02/02/2009",),
        ("August/02/2009",),
        ("02/june/2009",),
        ("02/2020/june",),
        ("2013-02-21 06:35:45.658505",),
        ("August 02 2009",),
        ("2013/02/21",),
        (None,),
    ],
    ["column_1"],
)

try:
    df_output = datetime_functions.MonthName.apply(
        data_frame=input_df,
        spark_context=sc,
        source_column="column_1",
        target_column="target_column"
    )
    df_output.show()
except:
    print("Unexpected Error happened ")
    raise
    

Saída

A saída será:

```
+------------+------------+
| column_1|target_column|
+------------+------------+
|20-2018-12 | December |
|2018-20-12 | null |
| 20182012| null |
| 12202018| null |
| 20122018| null |
|20-12-2018 | December |
|12/20/2018 | December |
| 02/02/02 | February |
|02 02 2009 | February |
|02/02/2009 | February |
|August/02/2009| August |
|02/june/2009| null |
|02/2020/june| null |
|2013-02-21 06:35:45.658505| February |
|August 02 2009| August |
| 2013/02/21| February |
| null | null |
+------------+------------+
```

A MonthName transformação usa a `source_column` como `"column_1"` e a `target_column` como `"target_column"`. Ele tenta extrair o nome do mês das sequências de data/hora na coluna `"column_1"` e o coloca na coluna `"target_column"`. Se a string de data/hora estiver em um formato não reconhecido ou não puder ser analisada, o valor `"target_column"` será definido como `null`.

A transformação extrai com sucesso o nome do mês de vários formatos de data/hora, como “20-12-2018", “20/12/2018", “02/02/2009", “2013-02-21 06:35:45.658 505" e “02 de agosto de 2009".

Métodos

• __call__

• apply

• name

• describeArgs

• describeReturn

• describeTransform

• describeErrors

• describe

__call__ (spark_context, data_frame, target_column, source_column=Nenhum, valor=Nenhum)

A MonthName transformação cria uma nova coluna contendo o nome do mês, a partir de uma string que representa uma data.

• source_column: o nome de uma coluna existente.

• value— Uma sequência de caracteres para avaliar..

• target_column— Um nome para a coluna recém-criada.

apply(cls, *args, **kwargs)

Herdado de GlueTransform apply.

name(cls)

Herdado de GlueTransform name.

describeArgs(cls)

Herdado de GlueTransform describeArgs.

describeReturn(cls)

Herdado de GlueTransform describeReturn.

describeTransform(cls)

Herdado de GlueTransform describeTransform.

describeErrors(cls)

Herdado de GlueTransform describeErrors.

describe(cls)

Herdado de GlueTransform describe.