So erstellen Sie Hadoop -Cluster mit Amazon EMR

Der Benutzer benötigt die Tools wie Hadoop, um Big-Data von Daten im Maßstab zu speichern, zu verwalten und zu analysieren, und es ist schwierig, es zu verarbeiten. Speichern und Verwalten so viele Daten können erledigt werden, indem Sie sie auf mehrere Computer verteilen. Amazon bietet den EMR-Dienst an, um diese Cluster in der Cloud zu verwalten, ohne sich über Bereitstellungen, Kosten und Zeitverbrauch zu sorgen.

Beginnen wir mit der Erstellung eines Hadoop -Cluster mit Amazon EMR.

Erstellen Sie Hadoop Cluster mit Amazon EMR

Um einen Hadoop -Cluster mit Amazon EMR zu erstellen, gehen Sie in das EMR -Dashboard und klicken Sie auf die “Cluster erstellen" Taste:

Geben Sie den Namen des Clusternamens ein und wählen Sie die Anwendungen für den EMR -Cluster aus:

Konfigurieren Sie die Hardware- und Sicherheitseinstellungen, indem Sie auf der Seite scrollen und dann auf die “klickenCluster erstellenSchaltfläche, um den Vorgang zu vervollständigen:

Danach gehen Sie von der AWS -Plattform in das EC2 -Dashboard, um die vom EMR -Cluster erstellten Instanzen zu validieren:

Klick auf das "SicherheitsgruppenSeite aus dem linken Feld und erweitern Sie die “AktionenRegisterkarte ", um auf die" zu klicken "Eingehende Regeln bearbeitenSchaltfläche nach Auswahl der EMR Master Security Group:

Fügen Sie eine eingehende Regel hinzu, um einen SSH -Port auszuwählen, auf den überall im Internet zugegriffen werden kann, und klicken Sie dann auf die “Regeln speichern" Taste:

Wiederholen Sie den vorherigen Schritt erneut mit der EMR Slave Security Group, indem Sie eingehende Regeln bearbeiten:

Wählen Sie den SSH -Anschluss aus, der von überall zugreifen wird, und klicken Sie dann auf die “Regeln speichern" Taste:

Sobald der EMR -Cluster erstellt wurde, klicken Sie einfach auf die “Aktivieren Sie eine SSH -Verbindung" Verknüpfung:

Danach beginnen Sie “KittUnd befolgen Sie die Anweisungen der Plattform:

Sobald alle Schritte auf Putty ausgeführt sind, klicken Sie einfach auf die “Offen" Taste:

Der Benutzer ist mit Amazon EMR mit dem Hadoop -Cluster verbunden:

Sie haben erfolgreich erstellt und mit EMR mit dem Hadoop -Cluster verbunden.

Abschluss

Um einen Amazon EMR -Cluster zu erstellen, gehen Sie in das EMR -Dashboard und klicken Sie auf die “Cluster erstellen" Taste. Konfigurieren Sie die Einstellungen für den EMR -Cluster, indem Sie den Namen eingeben und die Hadoop -Anwendung für den Cluster auswählen. Bearbeiten Sie danach die eingehenden Regeln der vom EMR -Cluster erstellten Sicherheitsgruppen und verwenden Sie dann Putty, um eine Verbindung zum Cluster herzustellen.