Uso de la utilidad de carga de datos de Base de datos ilimitada de Aurora PostgreSQL

PDFRSS

Aurora proporciona una utilidad para cargar datos directamente en Base de datos ilimitada desde un clúster de base de datos de Aurora PostgreSQL o desde una instancia de base de datos de RDS para PostgreSQL.

Siga los siguientes pasos para utilizar la utilidad de carga de datos:

1. Requisitos previos

2. Uso de la herramienta de evaluación de compatibilidad ilimitada

3. Preparación de la base de datos de origen

4. Preparación de la base de datos de destino

5. Creación de credenciales de la base de datos

6. Uno de los siguientes:

   • Configuración de la autenticación de bases de datos y el acceso a los recursos mediante un script (recomendado)

   • Configuración de la autenticación de bases de datos y el acceso manual a los recursos

7. Carga de datos desde un clúster de base de datos de Aurora PostgreSQL o una instancia de base de datos de RDS para PostgreSQL

Limitaciones

La utilidad de carga de datos tiene las siguientes limitaciones:

• No se admiten los siguientes tipos de datos: enum, ARRAY, BOX, CIRCLE, LINE, LSEG, PATH, PG_LSN, PG_SNAPSHOT, POLYGON, TSQUERY, TSVECTOR y TXID_SNAPSHOT.

• Los ceros iniciales (0) se eliminan del tipo de datos VARBIT durante la carga.

• La migración de datos falla si hay claves primarias compuestas en las tablas de origen.

• La migración de datos falla cuando hay claves externas en las tablas de destino.

• No se admite la carga de datos desde clústeres de bases de datos Multi-AZ de RDS para PostgreSQL.

Requisitos previos

La utilidad de carga de datos tiene los siguientes requisitos previos:

• La base de datos de origen utiliza Aurora PostgreSQL o RDS para PostgreSQL versión 11.x y posteriores.

• La base de datos de origen se encuentra en la misma Cuenta de AWS y Región de AWS que el grupo de particiones de base de datos de destino.

• El clúster de base de datos o la instancia de base de datos de origen tienen el estado available.

• Las tablas de la base de datos de origen y de la base de datos ilimitada tienen los mismos nombres de tabla, nombres de columnas y tipos de datos de columna.

• Las tablas de origen y destino tienen claves principales que utilizan las mismas columnas y el mismo orden de columnas.

• Debe disponer de un entorno para conectarse a una base de datos ilimitada para ejecutar comandos de carga de datos. Los comandos disponibles son los siguientes:

  • rds_aurora.limitless_data_load_start

  • rds_aurora.limitless_data_load_cancel

• Para CDC:

  • Tanto la base de datos de origen como el grupo de particiones de base de datos de destino deben usar el mismo grupo de subredes de base de datos, el mismo grupo de seguridad de VPC y el mismo puerto de base de datos. Estas configuraciones son para las conexiones de red tanto a la base de datos de origen como a los enrutadores del grupo de particiones de base de datos.

  • Debe activar la replicación lógica en la base de datos de origen. El usuario de la base de datos de origen debe tener privilegios para leer la replicación lógica.

Uso de la herramienta de evaluación de compatibilidad ilimitada

Puede utilizar la herramienta de evaluación de compatibilidad ilimitada para determinar rápidamente si su base de datos de PostgreSQL es compatible con Base de datos ilimitada de Aurora PostgreSQL. Debe generar un archivo pg_dump solo de esquema de la base de datos y, a continuación, ejecutarlo en la herramienta para evaluar qué instrucciones SQL se admiten y cuáles no.

Para obtener más información, consulte la documentación de la herramienta de evaluación de compatibilidad ilimitada.

Preparación de la base de datos de origen

Para acceder a la base de datos de origen para cargar datos, debe permitir la entrada de tráfico de red. Siga estos pasos.

Cómo permitir el acceso del tráfico de red a la base de datos de origen

1. Inicie sesión en la AWS Management Console y abra la consola de Amazon EC2 en https://console.aws.amazon.com/ec2/.

2. Navegue a la página Grupos de seguridad.

3. Elija ID de grupo de seguridad para el grupo de seguridad utilizado por la instancia o el clúster de base de datos de origen.

   Por ejemplo, el ID de grupo de seguridad es sg-056a84f1712b77926.

4. Vaya a la pestaña Reglas de entrada:

   1. Elija Editar reglas de entrada.

   2. Agregue una nueva regla de entrada para la instancia o el clúster de base de datos de origen:

      • Rango de puertos: puerto de base de datos para la base de datos de origen, normalmente 5432

      • ID de grupo de seguridad: sg-056a84f1712b77926 en este ejemplo

      

5. En la pestaña Reglas de salida:

   1. Elija Edit outbound rules.

   2. Agregue una nueva regla de salida para la instancia o el clúster de base de datos de origen:

      • Puerto de base de datos: All traffic (incluye los puertos 0-65535)

      • ID de grupo de seguridad: sg-056a84f1712b77926 en este ejemplo

      

6. Inicie sesión en la AWS Management Console y abra la consola de Amazon VPC en https://console.aws.amazon.com/vpc/.

7. Navegue a la página ACL de red.

8. Agregue la configuración de ACL de red predeterminada tal como se describe en la ACL de red predeterminada.

Preparación de la base de datos de destino

Siga los procedimientos descritos en Creación de tablas de Base de datos ilimitada de Aurora PostgreSQL para crear las tablas de destino en el grupo de particiones de base de datos.

Las tablas de destino deben tener los mismos esquemas, nombres de tabla y claves principales que las tablas de origen.

Creación de credenciales de la base de datos

Debe crear usuarios de bases de datos en las bases de datos de origen y destino y conceder los privilegios necesarios a los usuarios. Para obtener más información, consulte CREATE USER y GRANT en la documentación de PostgreSQL.

Creación de las credenciales de la base de datos de origen

El usuario de la base de datos de origen se pasa en el comando para iniciar la carga. El usuario debe tener privilegios para ejecutar la replicación desde la base de datos de origen.

1. Utilice el usuario maestro de la base de datos (u otro usuario con el rol rds_superuser) para crear un usuario de la base de datos de origen con privilegios LOGIN.

   CREATE USER source_db_username WITH PASSWORD 'source_db_user_password';

2. Otorgue el rol rds_superuser al usuario de la base de datos de origen.

   GRANT rds_superuser to source_db_username;

3. Si utiliza el modo full_load_and_cdc, otorgue el rol rds_replication al usuario de la base de datos de origen. El rol de rds_replication concede permisos para administrar ranuras lógicas y para transmitir datos mediante ranuras lógicas.

   GRANT rds_replication to source_db_username;

Creación de las credenciales de la base de datos de destino

El usuario de la base de datos de destino debe tener permiso para escribir en las tablas de destino del grupo de particiones de base de datos.

1. Utilice el usuario maestro de la base de datos (u otro usuario con el rol rds_superuser) para crear un usuario de la base de datos de destino con privilegios LOGIN.

   CREATE USER destination_db_username WITH PASSWORD 'destination_db_user_password';

2. Otorgue el rol rds_superuser al usuario de la base de datos de destino.

   GRANT rds_superuser to destination_db_username;