Construir la infraestructura AWS

Hay muchos Servicios de AWS que puede utilizar para crear la infraestructura de rastreo web. La sección de arquitectura de esta guía incluye una solución propuesta. Le recomendamos que considere utilizar lo siguiente Servicios de AWS para crear la infraestructura de soporte para su rastreador web:

• Utilice Amazon Virtual Private Cloud (Amazon VPC) para crear la VPC y las subredes.

• Inicie el proceso de rastreo mediante Amazon EventBridge Scheduler.

• Administre los trabajos del rastreador web mediante trabajos y colas AWS Batchde trabajos.

• Utilice una de las siguientes soluciones para ejecutar los trabajos del rastreador web:

  • Contenedores de Amazon Elastic Container Service (Amazon ECS) en AWS Fargate

  • Instancias de Amazon Elastic Compute Cloud (Amazon EC2)

    nota

    Si su aplicación puede gestionar las interrupciones, considere la posibilidad de utilizar Amazon EC2 Spot Instances a través de Spot Fleet. Las flotas de instancias puntuales pueden ayudarle a ahorrar considerablemente en costos de cómputo.

  • AWS Lambda funciones

• Guarde los datos recuperados y los archivos sin procesar en un bucket de Amazon Simple Storage Service (Amazon S3).