GSP103

Übersicht

Managed Service for Apache Spark ist ein schneller, nutzerfreundlicher, vollständig verwalteter Cloud-Dienst, über den Sie Cluster mit Apache Spark und Apache Hadoop einfacher und günstiger ausführen können. Vorgänge, für die früher Stunden oder Tage notwendig waren, dauern jetzt nur noch Sekunden oder Minuten. Sie können Managed Service for Apache Spark-Cluster schnell erstellen und jederzeit ihre Größe anpassen, sodass Sie sich keine Gedanken darüber machen müssen, dass Ihre Datenpipelines Ihre Cluster überlasten.

In diesem Lab erfahren Sie, wie Sie über die Google Cloud Console einen verwalteten Apache Spark-Cluster erstellen, einen einfachen Apache Spark-Job ausführen und die Anzahl der Worker im Cluster ändern.

Aufgaben

Aufgaben in diesem Lab:

• Verwalteten Apache Spark-Cluster in der Google Cloud Console erstellen
• Einen einfachen Apache Spark-Job ausführen
• Anzahl der Worker im Cluster ändern

Einrichtung und Anforderungen

Vor dem Klick auf „Start Lab“ (Lab starten)

Lesen Sie diese Anleitung. Labs sind zeitlich begrenzt und können nicht pausiert werden. Der Timer beginnt zu laufen, wenn Sie auf Lab starten klicken, und zeigt Ihnen, wie lange Google Cloud-Ressourcen für das Lab verfügbar sind.

In diesem praxisorientierten Lab können Sie die Lab-Aktivitäten in einer echten Cloud-Umgebung durchführen – nicht in einer Simulations- oder Demo-Umgebung. Dazu erhalten Sie neue, temporäre Anmeldedaten, mit denen Sie für die Dauer des Labs auf Google Cloud zugreifen können.

Für dieses Lab benötigen Sie Folgendes:

• Einen Standardbrowser (empfohlen wird Chrome)

• Zeit für die Durchführung des Labs – denken Sie daran, dass Sie ein begonnenes Lab nicht unterbrechen können.

Lab starten und bei der Google Cloud Console anmelden

1. Klicken Sie auf Lab starten. Wenn Sie für das Lab bezahlen müssen, wird ein Dialogfeld geöffnet, in dem Sie Ihre Zahlungsmethode auswählen können. Auf der rechten Seite befindet sich der Bereich Lab-Einrichtung und ‑Zugriff:

   • Button Google Cloud Console öffnen
   • Die temporären Anmeldedaten (Nutzername und Passwort), die Sie für dieses Lab verwenden müssen
   • Gegebenenfalls weitere Informationen für dieses Lab

   Der Lab-Timer befindet sich oben auf der Seite und zeigt die verbleibende Zeit an.

2. Klicken Sie auf Google Cloud Console öffnen. Wenn Sie Chrome verwenden, können Sie auch rechtsklicken und Link in Inkognitofenster öffnen auswählen.

   Im Lab werden Ressourcen aktiviert. Anschließend wird ein weiterer Tab mit der Seite „Anmelden“ geöffnet.

   Tipp: Ordnen Sie die Tabs nebeneinander in separaten Fenstern an.

   Hinweis: Wird das Dialogfeld Konto auswählen angezeigt, klicken Sie auf Anderes Konto verwenden.

3. Kopieren Sie bei Bedarf den folgenden Nutzernamen und fügen Sie ihn in das Dialogfeld Anmelden ein.

   {{{user_0.username | "Username"}}}

   Sie finden den Nutzernamen auch im Bereich Lab-Einrichtung und ‑Zugriff.

4. Klicken Sie auf Weiter.

5. Kopieren Sie das folgende Passwort und fügen Sie es in das Dialogfeld Willkommen ein.

   {{{user_0.password | "Password"}}}

   Sie finden das Passwort auch im Bereich Lab-Einrichtung und ‑Zugriff.

6. Klicken Sie auf Weiter.

   Wichtig: Sie müssen die für das Lab bereitgestellten Anmeldedaten verwenden. Nutzen Sie nicht die Anmeldedaten Ihres Google Cloud-Kontos. Hinweis: Wenn Sie Ihr eigenes Google Cloud-Konto für dieses Lab nutzen, können zusätzliche Kosten anfallen.

7. Klicken Sie sich durch die nachfolgenden Seiten:

   • Akzeptieren Sie die Nutzungsbedingungen.
   • Fügen Sie keine Wiederherstellungsoptionen oder 2-Faktor-Authentifizierung hinzu, da dies nur ein temporäres Konto ist.
   • Melden Sie sich nicht für kostenlose Testversionen an.

Nach wenigen Augenblicken wird die Google Cloud Console in diesem Tab geöffnet.

Hinweis: Wenn Sie auf Google Cloud-Produkte und ‑Dienste zugreifen möchten, klicken Sie auf das Navigationsmenü oder geben Sie den Namen des Produkts oder Dienstes in das Feld Suchen ein.

Cloud Shell aktivieren

Cloud Shell ist eine virtuelle Maschine, auf der Entwicklertools installiert sind. Sie bietet ein Basisverzeichnis mit 5 GB nichtflüchtigem Speicher und läuft auf Google Cloud. Mit Cloud Shell erhalten Sie Befehlszeilenzugriff auf Ihre Google Cloud-Ressourcen.

1. Klicken Sie oben in der Google Cloud Console auf Cloud Shell aktivieren .

2. Klicken Sie sich durch die folgenden Fenster:

   • Fahren Sie mit dem Informationsfenster zu Cloud Shell fort.
   • Autorisieren Sie Cloud Shell, Ihre Anmeldedaten für Google Cloud API-Aufrufe zu verwenden.

Wenn eine Verbindung besteht, sind Sie bereits authentifiziert und das Projekt ist auf Project_ID, eingestellt. Die Ausgabe enthält eine Zeile, in der die Project_ID für diese Sitzung angegeben ist:

gcloud ist das Befehlszeilentool für Google Cloud. Das Tool ist in Cloud Shell vorinstalliert und unterstützt die Tab-Vervollständigung.

3. (Optional) Sie können den aktiven Kontonamen mit diesem Befehl auflisten:

4. Klicken Sie auf Autorisieren.

Ausgabe:

5. (Optional) Sie können die Projekt-ID mit diesem Befehl auflisten:

Ausgabe:

Überprüfen, ob die Cloud Dataproc API aktiviert ist

Damit Sie einen verwalteten Apache Spark-Cluster in Google Cloud erstellen können, muss die Cloud Dataproc API aktiviert sein. So überprüfen Sie, ob die API aktiviert ist:

1. Klicken Sie im Navigationsmenü auf APIs und Dienste > Bibliothek.

2. Geben Sie in das Suchfeld Nach APIs und Diensten suchen den Begriff Cloud Dataproc API ein. Als Suchergebnis wird die Cloud Dataproc API angezeigt.

3. Klicken Sie auf die Cloud Dataproc API, um ihren Status aufzurufen. Wenn die API noch nicht aktiviert ist, klicken Sie auf Aktivieren.

Sobald die API aktiviert ist, fahren Sie mit der Lab-Anleitung fort.

Dem Compute Engine-Dienstkonto die erforderliche IAM-Rolle zuweisen

1. Klicken Sie in der Google Cloud Console im Navigationsmenü () auf IAM und Verwaltung > IAM.

2. Klicken Sie auf Prinzipal bearbeiten (Stiftsymbol) für das standardmäßige Compute Engine-Dienstkonto ([project-number]-compute@developer.gserviceaccount.com).

3. Klicken Sie auf + Weitere Rolle hinzufügen.

4. Wählen Sie unter Rolle auswählen die Rolle Storage-Administrator aus den Ergebnissen aus.

5. Klicken Sie auf Speichern.

Aufgabe 1: Cluster erstellen

1. Führen Sie in Cloud Shell den folgenden Befehl aus, um einen Cluster namens example-cluster mit e2-standard-2-VMs und nichtflüchtigen Standardspeichern mit 30 GB zu erstellen:

2. Wenn Sie aufgefordert werden, eine Zone zu bestätigen oder Cloud Shell zu autorisieren, geben Sie Y ein oder klicken Sie auf Autorisieren.

Das Erstellen des Clusters dauert einige Minuten. In der Befehlsausgabe wird Created [... example-cluster] angezeigt, sobald der Cluster bereit ist.

Klicken Sie auf Fortschritt prüfen.

Aufgabe 2: Job senden

So führen Sie einen Spark-Beispieljob aus:

1. Wählen Sie in der Google Cloud Console im Navigationsmenü () die Option Alle Produkte ansehen aus und klicken Sie dann im Abschnitt Analysen auf Verwaltetes Apache Spark > Cluster.

Der neu erstellte Cluster example-cluster sollte mit dem Status Wird ausgeführt aufgeführt sein.

2. Wählen Sie im linken Bereich Jobs aus, um in verwaltetem Apache Spark zur Jobansicht zu wechseln. Klicken Sie dann auf Job senden.

3. Legen Sie die folgenden Werte fest, um den Job zu aktualisieren. Übernehmen Sie für die restlichen Felder die Standardwerte:

4. Klicken Sie auf Senden.

Der Job wird in der Liste Jobs angezeigt. Dort finden Sie auch alle Cluster, Typen und den aktuellen Status der Jobs in Ihrem Projekt. Der Status des Jobs wechselt von Wird ausgeführt zu Erfolgreich.

Klicken Sie auf Fortschritt prüfen.

Aufgabe 3: Jobausgabe ansehen

So rufen Sie die Ausgabe des abgeschlossenen Jobs auf:

1. Klicken Sie in der Liste Jobs auf die Job-ID.

2. Wählen Sie EIN für den ZEILENUMBRUCH aus oder scrollen Sie ganz nach rechts, um sich den berechneten Pi-Wert anzusehen. Die Ausgabe (mit ZEILENUMBRUCH auf EIN) sollte in etwa so aussehen:

Der Job hat erfolgreich einen ungefähren Wert für Pi berechnet.

Aufgabe 4: Cluster aktualisieren, um die Anzahl der Worker zu ändern

So ändern Sie die Anzahl der Worker-Instanzen in Ihrem Cluster:

1. Wählen Sie im linken Navigationsbereich Cluster aus, um zur Ansicht „Verwaltete Apache Spark-Cluster“ zurückzukehren.

2. Klicken Sie in der Liste Cluster auf example-cluster. Standardmäßig enthält die Seite eine Übersicht über die CPU-Auslastung des Clusters.

3. Klicken Sie auf Konfiguration, um die aktuellen Einstellungen des Clusters anzuzeigen.

4. Klicken Sie auf Bearbeiten. Die Anzahl der Worker-Knoten kann jetzt bearbeitet werden.

5. Geben Sie 4 in das Feld Worker-Knoten ein.

6. Klicken Sie auf Speichern.

Der Cluster wurde aktualisiert. Überprüfen Sie nun die Anzahl der VM-Instanzen im Cluster.

Klicken Sie auf Fortschritt prüfen.

1. Wenn Sie den Job noch einmal im aktualisierten Cluster ausführen möchten, klicken Sie im linken Bereich auf Jobs und dann auf JOB SENDEN.

2. Übernehmen Sie für die folgenden Felder dieselben Werte wie im Abschnitt Job senden:

3. Klicken Sie auf Senden.

Aufgabe 5: Wissen testen

Im Folgenden stellen wir Ihnen einige Multiple-Choice-Fragen, um Ihr bisher erworbenes Wissen zu testen und zu festigen. Beantworten Sie die Fragen, so gut Sie können.

Das wars! Sie haben das Lab erfolgreich abgeschlossen.

Sie wissen nun, wie Sie über die Google Cloud Console einen verwalteten Apache Spark-Cluster erstellen und aktualisieren und dann einen Job in diesem Cluster senden.

Weitere Informationen

Dieses Lab ist auch Teil der Lab-Reihe „Qwik Starts“. Die Labs geben Ihnen einen kleinen Vorgeschmack auf die vielen Funktionen von Google Cloud. Wählen Sie im Lab-Katalog unter „Qwik Starts“ einfach das nächste Lab aus, das Sie durchgehen möchten.

Google Cloud-Schulungen und -Zertifizierungen

In unseren Schulungen erfahren Sie alles zum optimalen Einsatz unserer Google Cloud-Technologien und können sich entsprechend zertifizieren lassen. Unsere Kurse vermitteln technische Fähigkeiten und Best Practices, damit Sie möglichst schnell mit Google Cloud loslegen und Ihr Wissen fortlaufend erweitern können. Wir bieten On-Demand-, Präsenz- und virtuelle Schulungen für Anfänger wie Fortgeschrittene an, die Sie individuell in Ihrem eigenen Zeitplan absolvieren können. Mit unseren Zertifizierungen weisen Sie nach, dass Sie Experte im Bereich Google Cloud-Technologien sind.

Anleitung zuletzt am 27. August 2026 aktualisiert

Lab zuletzt am 27. August 2026 getestet

© 2026 Google LLC. Alle Rechte vorbehalten. Google und das Google-Logo sind Marken von Google LLC. Alle anderen Unternehmens- und Produktnamen können Marken der jeweils mit ihnen verbundenen Unternehmen sein.