FillMissingValues-Klasse

Die FillMissingValues-Klasse lokalisiert Nullwerte und leere Zeichenfolgen in einem angegebenen DynamicFrame und verwendet Machine-Learning-Methoden wie lineare Regression und zufällige Gesamtstruktur, um die fehlenden Werte vorherzusagen. Der ETL-Job verwendet die Werte im Eingabe-Dataset, um das Machine-Learning-Modell zu trainieren, das dann vorhersagt, was die fehlenden Werte sein sollten.

Tipp

Wenn Sie inkrementelle Datensätze verwenden, wird jeder inkrementelle Satz als Trainingsdaten für das Machine-Learning-Modell verwendet, sodass die Ergebnisse möglicherweise nicht so genau sind.

Import:

from awsglueml.transforms import FillMissingValues

Methoden

• Anwenden

apply(frame, missing_values_column, output_column ="", transformation_ctx ="", info ="", stageThreshold = 0, totalThreshold = 0)

Trägt die fehlenden Werte eines Dynamic Frames in eine angegebene Spalte ein und gibt einen neuen Frame mit Schätzungen in einer neuen Spalte zurück. Bei Zeilen ohne fehlende Werte wird der Wert der angegebenen Spalte in die neue Spalte dupliziert.

• frame – Der DynamicFrame, in dem fehlende Werte ausgefüllt werden sollen. Erforderlich.

• missing_values_column – Die Spalte, die fehlende Werte enthält (null-Werte und leere Zeichenfolgen). Erforderlich.

• output_column – Der Name der neuen Spalte, die geschätzte Werte für alle Zeilen enthält, deren Wert gefehlt hat. Optional; der Standardwert ist der Wert von missing_values_column mit Suffix "_filled".

• transformation_ctx – Eine eindeutige Zeichenfolge zur Identifikation von Statusinformationen (optional).

• info – Eine Zeichenfolge im Zusammenhang mit Fehlern in der Transformation (optional).

• stageThreshold – Die maximale Anzahl von Fehlern, die in der Transformation auftreten dürfen, bevor der Vorgang abgebrochen wird (optional, Standardwert ist Null).

• totalThreshold – Die maximale Anzahl von Fehlern, die insgesamt auftreten dürfen, bevor die Verarbeitung abgebrochen wird (optional, Standardwert ist Null).

Gibt einen neuen DynamicFrame mit einer zusätzlichen Spalte zurück, die Schätzungen für Zeilen mit fehlenden Werten und dem aktuellen Wert für andere Zeilen enthält.