Come creare il cluster Hadoop con Amazon EMR
L'utente ha bisogno di strumenti come Hadoop per archiviare, gestire e analizzare i big data dei dati su scala ed è difficile gestirli. La memorizzazione e la gestione di tanti dati possono essere eseguiti distribuendoli su più computer. Amazon fornisce il servizio EMR per gestire questi cluster sul cloud senza preoccuparsi di implementazione, spese e problemi di consumo di tempo.
Cominciamo con la creazione di un cluster Hadoop con Amazon EMR.
Crea cluster Hadoop con Amazon EMR
Per creare un cluster Hadoop con Amazon EMR, vai nella dashboard EMR e fai clic su "Crea cluster"Pulsante:
Digitare il nome del nome del cluster e selezionare le applicazioni per il cluster EMR:
Configurare le impostazioni hardware e di sicurezza scorrendo verso il basso la pagina e quindi facendo clic su "Crea cluster"Pulsante per completare il processo:
Successivamente, vai nella dashboard EC2 dalla piattaforma AWS per convalidare le istanze create dal cluster EMR:
Clicca sul "Gruppi di sicurezza"Pagina dal pannello sinistro ed espandere il"Azioni"Scheda per fare clic su"Modificare le regole in entrata"Pulsante dopo aver selezionato il gruppo di sicurezza Master EMR:
Aggiungi una regola in entrata per selezionare una porta SSH che può essere accessibile da qualsiasi luogo su Internet e quindi fare clic su "Salva regole"Pulsante:
Ripeti nuovamente il passaggio precedente con il gruppo di sicurezza Slave EMR mediante regole in entrata:
Seleziona la porta SSH che accederà da qualsiasi luogo e quindi fai clic su "Salva regole"Pulsante:
Una volta creato il cluster EMR, fai semplicemente clic su "Abilita una connessione SSH" collegamento:
Dopodiché, inizia "Stucco"E seguire le istruzioni fornite dalla piattaforma:
Una volta completati tutti i passaggi su PUTTY, fai semplicemente clic su "Aprire"Pulsante:
L'utente è connesso al cluster Hadoop con Amazon EMR:
Hai creato e collegato correttamente al cluster Hadoop usando EMR.
Conclusione
Per creare un cluster Amazon EMR, vai nel cruscotto EMR e fai clic su "Crea cluster"Pulsante. Configurare le impostazioni per il cluster EMR digitando il nome e selezionando l'applicazione Hadoop per il cluster. Successivamente, modifica le regole in entrata dei gruppi di sicurezza creati dal cluster EMR e quindi usa PUTTY per connettersi al cluster.