Create a cluster

Periksa progres saya

/ 50

Submit a job

Periksa progres saya

/ 30

Update a cluster

Periksa progres saya

/ 20

Lab ini mungkin menggabungkan alat AI untuk mendukung pembelajaran Anda.
Konten ini belum dioptimalkan untuk perangkat seluler.
Untuk pengalaman terbaik, kunjungi kami dengan komputer desktop menggunakan link yang dikirim melalui email.

GSP103

Lab mandiri Google Cloud

Ringkasan

Managed Service untuk Apache Spark adalah layanan cloud yang cepat, mudah digunakan, dan terkelola sepenuhnya untuk menjalankan cluster Apache Spark dan Apache Hadoop dengan cara yang lebih mudah dan hemat biaya. Operasi yang sebelumnya memerlukan waktu berjam-jam atau berhari-hari kini bisa dikerjakan dalam hitungan detik atau menit. Buat cluster Managed Service untuk Apache Spark dengan cepat dan sesuaikan ukurannya kapan saja, sehingga Anda tidak perlu khawatir pipeline data akan melampaui kapasitas cluster Anda.

Lab ini menunjukkan cara menggunakan konsol Google Cloud untuk membuat cluster Managed Apache Spark, menjalankan tugas Apache Spark sederhana di cluster, lalu mengubah jumlah worker dalam cluster.

Yang akan Anda lakukan

Di lab ini, Anda akan mempelajari cara:

  • Membuat cluster Managed Apache Spark di Konsol Google Cloud
  • Menjalankan tugas Apache Spark sederhana
  • Mengubah jumlah worker dalam cluster

Penyiapan dan persyaratan

Sebelum mengklik tombol Start Lab

Baca petunjuk ini. Lab memiliki timer dan Anda tidak dapat menjedanya. Timer yang dimulai saat Anda mengklik Start Lab akan menampilkan durasi ketersediaan resource Google Cloud untuk Anda.

Lab interaktif ini dapat Anda gunakan untuk melakukan aktivitas lab di lingkungan cloud sungguhan, bukan di lingkungan demo atau simulasi. Untuk mengakses lab ini, Anda akan diberi kredensial baru yang bersifat sementara dan dapat digunakan untuk login serta mengakses Google Cloud selama durasi lab.

Untuk menyelesaikan lab ini, Anda memerlukan:

  • Akses ke browser internet standar (disarankan browser Chrome).
Catatan: Gunakan jendela Samaran (direkomendasikan) atau browser pribadi untuk menjalankan lab ini. Hal ini akan mencegah konflik antara akun pribadi Anda dan akun siswa yang dapat menyebabkan tagihan ekstra pada akun pribadi Anda.
  • Waktu untuk menyelesaikan lab. Ingat, setelah dimulai, lab tidak dapat dijeda.
Catatan: Hanya gunakan akun siswa untuk lab ini. Jika Anda menggunakan akun Google Cloud yang berbeda, Anda mungkin akan dikenai tagihan ke akun tersebut.

Cara memulai lab dan login ke Konsol Google Cloud

  1. Klik tombol Start Lab. Jika Anda perlu membayar lab, dialog akan terbuka untuk memilih metode pembayaran. Di sebelah kanan terdapat panel Lab setup and access yang berisi hal-hal berikut:

    • Tombol Open Google Cloud console
    • Kredensial sementara (nama pengguna dan sandi) yang harus Anda gunakan untuk lab ini
    • Informasi lain, jika diperlukan, untuk menyelesaikan lab ini

    Perhatikan bahwa timer lab terletak di dekat bagian atas halaman, yang menampilkan waktu yang tersisa.

  2. Klik Open Google Cloud console (atau klik kanan dan pilih Open Link in Incognito Window jika Anda menjalankan browser Chrome).

    Lab akan menjalankan resource, lalu membuka tab lain yang menampilkan halaman Sign in.

    Tips: Atur tab di jendela terpisah secara berdampingan.

    Catatan: Jika Anda melihat dialog Choose an account, klik Use Another Account.
  3. Jika perlu, salin Username di bawah dan tempel ke dialog Sign in.

    {{{user_0.username | "Username"}}}

    Anda juga dapat menemukan Username di panel Lab setup and access.

  4. Klik Next.

  5. Salin Password di bawah dan tempel ke dialog Welcome.

    {{{user_0.password | "Password"}}}

    Anda juga dapat menemukan Password di panel Lab setup and access.

  6. Klik Next.

    Penting: Anda harus menggunakan kredensial yang diberikan lab. Jangan menggunakan kredensial akun Google Cloud Anda. Catatan: Penggunaan akun Google Cloud sendiri untuk lab ini mungkin dikenai biaya tambahan.
  7. Klik untuk melanjutkan ke halaman berikutnya:

    • Setujui persyaratan dan ketentuan.
    • Jangan tambahkan opsi pemulihan atau autentikasi 2 langkah (karena ini akun sementara).
    • Jangan daftar uji coba gratis.

Setelah beberapa saat, Konsol Google Cloud akan terbuka di tab ini.

Catatan: Untuk mengakses produk dan layanan Google Cloud, klik Navigation menu atau ketik nama layanan atau produk di kolom Search. Ikon Navigation menu dan kolom Search

Mengaktifkan Cloud Shell

Cloud Shell adalah mesin virtual yang dilengkapi dengan berbagai alat pengembangan. Mesin virtual ini menawarkan direktori beranda persisten berkapasitas 5 GB dan berjalan di Google Cloud. Cloud Shell menyediakan akses command-line untuk resource Google Cloud Anda.

  1. Klik Activate Cloud Shell Ikon Activate Cloud Shell di bagian atas Konsol Google Cloud.

  2. Klik jendela berikut:

    • Lanjutkan melalui jendela informasi Cloud Shell.
    • Beri otorisasi ke Cloud Shell untuk menggunakan kredensial Anda guna melakukan panggilan Google Cloud API.

Setelah terhubung, Anda sudah diautentikasi, dan project ditetapkan ke Project_ID, . Output berisi baris yang mendeklarasikan Project_ID untuk sesi ini:

Project Cloud Platform Anda dalam sesi ini disetel ke {{{project_0.project_id | "PROJECT_ID"}}}

gcloud adalah alat command line untuk Google Cloud. Alat ini sudah terinstal di Cloud Shell dan mendukung pelengkapan command line.

  1. (Opsional) Anda dapat menampilkan daftar nama akun yang aktif dengan perintah ini:
gcloud auth list
  1. Klik Authorize.

Output:

ACTIVE: * ACCOUNT: {{{user_0.username | "ACCOUNT"}}} Untuk menetapkan akun aktif, jalankan: $ gcloud config set account `ACCOUNT`
  1. (Opsional) Anda dapat menampilkan daftar ID project dengan perintah ini:
gcloud config list project

Output:

[core] project = {{{project_0.project_id | "PROJECT_ID"}}} Catatan: Untuk mendapatkan dokumentasi gcloud yang lengkap di Google Cloud, baca panduan ringkasan gcloud CLI.

Memastikan Cloud Dataproc API diaktifkan

Untuk membuat cluster Managed Apache Spark di Google Cloud, Cloud Dataproc API harus diaktifkan. Untuk memastikan API sudah diaktifkan:

  1. Klik Navigation menu > APIs & Services > Library.

  2. Ketik Cloud Dataproc API dalam dialog Search for APIs & Services. Konsol akan menampilkan Cloud Dataproc API dalam hasil penelusuran.

  3. Klik Cloud Dataproc API untuk menampilkan status API. Jika API belum diaktifkan, klik tombol Enable.

Setelah API diaktifkan, lanjutkan ke petunjuk lab.

Memberikan peran IAM yang diperlukan ke akun layanan Compute Engine

  1. Di Konsol Google Cloud, di menu navigasi (Ikon Menu Navigasi), pilih IAM & Admin > IAM.

  2. Klik Edit principal (ikon pensil) untuk Compute Engine default service account ([project-number]-compute@developer.gserviceaccount.com).

  3. Klik + Add another role.

  4. Untuk Select a role, cari Storage Admin, lalu pilih dari hasilnya.

  5. Klik Save.

Tugas 1. Membuat cluster

  1. Di Cloud Shell, jalankan perintah berikut untuk membuat cluster bernama example-cluster dengan VM e2-standard-2 dan persistent disk standar 30 GB:
gcloud dataproc clusters create example-cluster \ --region={{{ project_0.default_region }}} \ --zone={{{ project_0.default_zone }}} \ --master-machine-type=e2-standard-2 \ --master-boot-disk-type=pd-standard \ --master-boot-disk-size=30GB \ --worker-machine-type=e2-standard-2 \ --worker-boot-disk-type=pd-standard \ --worker-boot-disk-size=30GB \ --num-workers=2
  1. Jika diminta untuk mengonfirmasi zona atau memberikan otorisasi pada Cloud Shell, masukkan Y atau klik Authorize.

Cluster Anda memerlukan waktu beberapa menit untuk dibuat. Output perintah akan menampilkan Created [... example-cluster] setelah siap.

Klik Periksa progres saya untuk memverifikasi tugas yang telah dijalankan.

Membuat cluster

Tugas 2. Mengirim tugas

Untuk menjalankan sampel tugas Spark:

  1. Di Konsol Google Cloud, pilih Navigation menu (Ikon Menu Navigasi) > View All Products, lalu di bagian Analytics, klik Managed Apache Spark > Clusters.

Anda akan melihat cluster yang baru dibuat, example-cluster, tercantum dengan status Running.

  1. Klik Jobs di panel kiri untuk beralih ke tampilan tugas Managed Apache Spark, lalu klik Submit job.

  2. Tetapkan kolom berikut untuk memperbarui Tugas. Setujui nilai default untuk semua kolom lainnya.

Kolom Nilai
Region
Cluster example-cluster
Job type Spark
Main class or jar org.apache.spark.examples.SparkPi
Jar files file:///usr/lib/spark/examples/jars/spark-examples.jar
Arguments 1000 (Ini menentukan jumlah tugas.)
  1. Klik Submit.
Catatan: Cara tugas menghitung Pi: Tugas Spark memperkirakan nilai Pi menggunakan metode Monte Carlo. Metode ini menghasilkan titik x,y pada bidang koordinat yang memodelkan lingkaran dalam satu bangun persegi. Argumen input (1000) menentukan jumlah pasangan x,y yang akan dihasilkan. Makin banyak pasangan yang dihasilkan, makin tinggi akurasi perkiraan. Perkiraan ini memanfaatkan worker node Managed Apache Spark untuk memparalelkan komputasi. Untuk mengetahui informasi selengkapnya, baca artikel Estimating Pi using the Monte Carlo Method dan JavaSparkPi.java on GitHub.

Tugas Anda akan muncul dalam daftar Jobs, yang menampilkan tugas project Anda beserta cluster, jenis, dan status terkininya. Status tugas akan ditampilkan sebagai Running, lalu menjadi Succeeded setelah tugas selesai.

Klik Periksa progres saya untuk memverifikasi tugas yang telah dijalankan.

Mengirim tugas

Tugas 3. Melihat output tugas

Untuk melihat output tugas yang sudah selesai:

  1. Klik ID pekerjaan di daftar Jobs.

  2. Pilih LINE WRAP ke ON atau scroll ke ujung kanan guna melihat nilai terhitung untuk Pi. Output Anda, dengan LINE WRAP ON, akan terlihat seperti ini:

Output

Tugas Anda berhasil menghitung perkiraan nilai untuk pi!

Tugas 4. Memperbarui cluster untuk mengubah jumlah worker

Untuk mengubah jumlah worker instance di cluster:

  1. Pilih Clusters di panel navigasi sebelah kiri untuk kembali ke tampilan Cluster Managed Apache Spark.

  2. Klik example-cluster di daftar Clusters. Secara default, halaman tersebut menampilkan ringkasan penggunaan CPU cluster Anda.

  3. Klik Configuration untuk menampilkan setelan cluster Anda saat ini.

  4. Klik Edit. Jumlah worker node kini dapat diedit.

  5. Masukkan 4 di kolom Worker nodes.

  6. Klik Save.

Cluster Anda berhasil diperbarui. Periksa jumlah instance VM dalam cluster.

Klik Periksa progres saya untuk memverifikasi tugas yang telah dijalankan.

Memperbarui cluster
  1. Untuk menjalankan kembali tugas dengan cluster yang telah diperbarui, klik Jobs di panel kiri, lalu klik SUBMIT JOB.

  2. Tetapkan kolom yang sama seperti pada bagian Mengirim tugas:

Kolom Nilai
Region
Cluster example-cluster
Job type Spark
Main class or jar org.apache.spark.examples.SparkPi
Jar files file:///usr/lib/spark/examples/jars/spark-examples.jar
Arguments 1000 (Ini menentukan jumlah tugas.)
  1. Klik Submit.

Tugas 5. Menguji pemahaman Anda

Di bawah ini terdapat beberapa pertanyaan pilihan ganda untuk memperkuat pemahaman Anda tentang konsep-konsep dalam lab ini. Jawab pertanyaan tersebut sebaik mungkin.

Selamat!

Anda kini sudah memahami cara menggunakan konsol Google Cloud untuk membuat dan memperbarui cluster Managed Apache Spark, serta mengirim tugas dalam cluster tersebut.

Langkah berikutnya/Pelajari lebih lanjut

Lab ini juga merupakan bagian dari rangkaian lab yang disebut Qwik Start. Lab ini dirancang agar Anda dapat mencoba berbagai fitur yang tersedia dengan Google Cloud. Tinjau daftar "Qwik Start" di katalog lab untuk menemukan lab berikutnya yang ingin Anda ikuti.

Sertifikasi dan pelatihan Google Cloud

...membantu Anda mengoptimalkan teknologi Google Cloud. Kelas kami mencakup keterampilan teknis dan praktik terbaik untuk membantu Anda memahami dengan cepat dan melanjutkan proses pembelajaran. Kami menawarkan pelatihan tingkat dasar hingga lanjutan dengan opsi on demand, live, dan virtual untuk menyesuaikan dengan jadwal Anda yang sibuk. Sertifikasi membantu Anda memvalidasi dan membuktikan keterampilan serta keahlian Anda dalam teknologi Google Cloud.

Manual Terakhir Diperbarui pada 27 Agustus 2026

Lab Terakhir Diuji pada 27 Agustus 2026

Hak cipta 2026 Google LLC. Semua hak dilindungi undang-undang. Google dan logo Google adalah merek dagang dari Google LLC. Semua nama perusahaan dan produk lain mungkin adalah merek dagang masing-masing perusahaan yang bersangkutan.

Sebelum memulai

  1. Lab membuat project dan resource Google Cloud untuk jangka waktu tertentu
  2. Lab memiliki batas waktu dan tidak memiliki fitur jeda. Jika lab diakhiri, Anda harus memulainya lagi dari awal.
  3. Di kiri atas layar, klik Start lab untuk memulai

Gunakan penjelajahan rahasia

  1. Salin Nama Pengguna dan Sandi yang diberikan untuk lab tersebut
  2. Klik Open console dalam mode pribadi

Login ke Konsol

  1. Login menggunakan kredensial lab Anda. Menggunakan kredensial lain mungkin menyebabkan error atau dikenai biaya.
  2. Setujui persyaratan, dan lewati halaman resource pemulihan
  3. Jangan klik End lab kecuali jika Anda sudah menyelesaikan lab atau ingin mengulanginya, karena tindakan ini akan menghapus pekerjaan Anda dan menghapus project

Konten ini tidak tersedia untuk saat ini

Kami dapat memberi tahu Anda melalui email saat konten tersedia

Bagus!

Kami dapat menghubungi Anda melalui email saat konten tersedia

Satu lab dalam satu waktu

Konfirmasi untuk mengakhiri semua lab yang ada dan memulai lab ini

Gunakan penjelajahan rahasia untuk menjalankan lab

Menggunakan jendela Samaran atau browser pribadi adalah cara terbaik untuk menjalankan lab ini. Langkah ini akan mencegah konflik antara akun pribadi Anda dan akun Siswa, yang dapat menyebabkan tagihan ekstra pada akun pribadi Anda.