Configuración de las llamadas de AWS para que pasen a través de la VPC - AWS Glue

Configuración de las llamadas de AWS para que pasen a través de la VPC

El parámetro de trabajo especial disable-proxy permite enrutar las llamadas a Simple Storage Service (Amazon S3) para descargar scripts y bibliotecas a través de la VPC. AWS Glue utiliza un proxy local para enviar tráfico a través de la VPC de AWS Glue con el fin de descargar scripts y bibliotecas y de enviar solicitudes a CloudWatch para publicar registros y métricas. Este proxy permite que el trabajo funcione con normalidad, aunque la VPC no configure una ruta adecuada a Simple Storage Service (Amazon S3) y CloudWatch. Ahora, AWS Glue ofrece un parámetro para desactivar este comportamiento en todas las API de Simple Storage Service (Amazon S3) utilizadas para descargar scripts y bibliotecas. Para obtener más información, consulte Parámetros especiales utilizados por AWS Glue.

nota

Esta característica es compatible con trabajos de AWS Glue en AWS Glue versión 2.0 y superior. Cuando utilice esta característica, debe asegurarse de que la VPC haya configurado una ruta a Simple Storage Service (Amazon S3) a través de un punto de conexión de VPC de servicio o NAT.

Ejemplo de uso

Crear un trabajo de AWS Glue con disable-proxy:

aws glue create-job \ --name no-proxy-job \ --role GlueDefaultRole \ --command "Name=glueetl,ScriptLocation=s3://my-bucket/glue-script.py" \ --connections Connections="traffic-monitored-connection" \ --default-arguments '{"--disable-proxy" : "true"}'