Creación de un nodo de destino de BigQuery - AWS Glue

Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.

Creación de un nodo de destino de BigQuery

Requisitos previos necesarios

  • Una conexión del Catálogo de datos de AWS Glue tipo BigQuery

  • Un secreto de AWS Secrets Manager de las credenciales de Google BigQuery, que utiliza la conexión.

  • Permisos adecuados en el trabajo para leer el secreto utilizado por la conexión.

  • El nombre y el conjunto de datos de la tabla y el proyecto de Google Cloud correspondiente al que desea escribir.

Agregar un destino de datos de BigQuery

Para agregar un nodo de Destino de datos: BigQuery, siga estos pasos:
  1. Elija la conexión para el destino de datos de BigQuery. Dado que lo ha creado, debería estar disponible en el menú desplegable. Si es necesario crear una conexión, elija Crear conexión de BigQuery. Para más información, consulte Información general sobre el uso de conectores y conexiones.

    Una vez que haya elegido una conexión, puede ver las propiedades de la conexión mediante un clic en Ver propiedades.

  2. Identifique en qué tabla de BigQuery desea escribir y, a continuación, elija un Método de escritura.

    • Directo: escribe en BigQuery directamente mediante la API de escritura de BigQuery Storage.

    • Indirecto: escribe en Google Cloud Storage y, luego, copia en BigQuery.

    Si quiere escribir de forma indirecta, proporcione una ubicación de GCS de destino con un bucket de GCS temporal. Deberá proporcionar una configuración adicional en la conexión de AWS Glue. Para obtener más información, consulte Uso de escritura indirecta con Google BigQuery.

  3. Describa los datos que desea leer

    (Obligatorio) defina el Proyecto principal como el proyecto que contiene la tabla o un proyecto principal de facturación, si corresponde.

    Si ha elegido una sola tabla, establezca Tabla con el nombre de una tabla de Google BigQuery en el siguiente formato: [dataset].[table]