Configura un cluster VPC per ospitare

Prima di poter avviare i cluster in aVPC, devi creare una VPC e una sottorete. Per sottoreti pubbliche, devi creare un gateway Internet e collegarlo alla sottorete. Le seguenti istruzioni descrivono come creare un ambiente VPC in grado di ospitare EMR cluster Amazon.

Per creare un VPC con sottoreti per un cluster Amazon EMR

1. Apri la VPC console Amazon all'indirizzo https://console.aws.amazon.com/vpc/.

2. In alto a destra della pagina, scegli Regione AWSper il tuo. VPC

3. Scegli Crea VPC.

4. Nella pagina delle VPCimpostazioni, scegli VPCe altro ancora.

5. In Generazione automatica di tag nome, abilita la generazione automatica e inserisci un nome per il tuo. VPC Questo ti aiuta a identificare la sottorete VPC and nella VPC console Amazon dopo averla creata.

6. Nel campo IPv4CIDRblocco, inserisci uno spazio di indirizzi IP privato per VPC garantire la corretta risoluzione del DNS nome host; in caso contrario, potresti riscontrare errori nei EMR cluster Amazon. Ciò include i seguenti intervalli di indirizzi IP:

   • 10.0.0.0 - 10.255.255.255

   • 172.16.0.0 - 172.31.255.255

   • 192.168.0.0 - 192.168.255.255

7. In Numero di zone di disponibilità (AZs), scegli il numero di zone di disponibilità in cui desideri avviare le sottoreti.

8. In Numero di sottoreti pubbliche, scegli una singola sottorete pubblica da aggiungere alla tua. VPC Se i dati utilizzati dal cluster sono disponibili su Internet (ad esempio, in Amazon S3 o AmazonRDS), è sufficiente utilizzare una sottorete pubblica e non è necessario aggiungere una sottorete privata.

9. In Numero di sottoreti private, scegli il numero di sottoreti private che desideri aggiungere alle tue. VPC Selezionane una o più se i dati per l'applicazione sono archiviati nella rete in uso (ad esempio, in un database Oracle). Per una VPC sottorete privata, tutte le EC2 istanze Amazon devono avere almeno un percorso verso Amazon EMR tramite l'interfaccia elastic network. Nella console, questo viene configurato automaticamente.

10. In NATgateway, scegli facoltativamente di aggiungere gateway. NAT Sono necessari solo se disponi di sottoreti private che devono comunicare con Internet.

11. Nella sezione VPCEndpoint, scegli facoltativamente di aggiungere endpoint per Amazon S3 alle tue sottoreti.

12. Verifica che le opzioni Abilita nomi DNShost e Abilita risoluzione siano selezionate. DNS Per ulteriori informazioni, consulta Using DNS with your VPC.

13. Scegli Crea VPC.

14. Una finestra di stato mostra lo stato di avanzamento del lavoro. Al termine del lavoro, scegli Visualizza VPC per accedere alla VPCs pagina I tuoi dati, che mostra le impostazioni predefinite VPC e VPC quelle appena create. VPCQuello che avete creato non è predefinitoVPC, pertanto VPC nella colonna Predefinito viene visualizzato No.

15. Se desideri VPC associare il tuo a una DNS voce che non include un nome di dominio, vai ai set di DHCPopzioni, scegli Crea set di DHCP opzioni e ometti un nome di dominio. Dopo aver creato il set di opzioni, accedete al nuovo setVPC, scegliete Modifica set di DHCP opzioni nel menu Azioni e selezionate il nuovo set di opzioni. Non è possibile modificare il nome di dominio utilizzando la console dopo la creazione del set di DNS opzioni.

    È consigliabile garantire la risoluzione del nome di dominio completo (FQDN) per i nodi con Hadoop e le applicazioni correlate. Per garantire una DNS risoluzione corretta, configura un VPC che includa un set DHCP di opzioni i cui parametri siano impostati sui seguenti valori:

    • domain-name = ec2.internal

      Utilizza ec2.internal se la Regione è Stati Uniti orientali (Virginia settentrionale). Per altre regioni, usa region-name.compute.internal. Ad esempious-west-2, usaus-west-2.compute.internal. Per il AWS GovCloud Regione (Stati Uniti occidentali), usous-gov-west-1.compute.internal.

    • domain-name-servers = AmazonProvidedDNS

    Per ulteriori informazioni, consulta i set di DHCP opzioni nella Amazon VPC User Guide.

16. Dopo VPC la creazione, vai alla pagina Subnet e annota l'ID di sottorete di una delle sottoreti della tua nuova. VPC Queste informazioni vengono utilizzate quando si avvia il EMR cluster Amazon inVPC.