Petunjuk dan persyaratan penyiapan lab
Lindungi akun dan progres Anda. Selalu gunakan jendela browser pribadi dan kredensial lab untuk menjalankan lab ini.

Pengantar Managed Service untuk Apache Spark: Hadoop dan Spark di Google Cloud

Lab 15 menit universal_currency_alt 1 Kredit show_chart Pengantar
info Lab ini mungkin menggabungkan alat AI untuk mendukung pembelajaran Anda.
Konten ini belum dioptimalkan untuk perangkat seluler.
Untuk pengalaman terbaik, kunjungi kami dengan komputer desktop menggunakan link yang dikirim melalui email.

GSP123

Lab mandiri Google Cloud

Ringkasan

Managed Service untuk Apache Spark adalah layanan Spark dan Hadoop terkelola yang membantu Anda memanfaatkan alat data open source untuk batch processing, pembuatan kueri, streaming, dan machine learning. Otomatisasi Managed Service untuk Apache Spark membantu Anda membuat cluster dengan cepat, mengelolanya dengan mudah, dan menghemat biaya dengan menonaktifkan cluster saat tidak diperlukan. Dengan berkurangnya waktu dan biaya untuk urusan administrasi, Anda dapat lebih berfokus pada tugas dan data Anda.

Lab ini diadaptasi dari Panduan membuat cluster Managed Service untuk Apache Spark menggunakan konsol Google Cloud.

Yang akan Anda pelajari

  • Membuat cluster Managed Service untuk Apache Spark (dengan Apache Spark bawaan).
  • Mengirimkan tugas Spark.
  • Mematikan cluster Anda.

Penyiapan dan persyaratan

Sebelum mengklik tombol Start Lab

Baca petunjuk ini. Lab memiliki timer dan Anda tidak dapat menjedanya. Timer yang dimulai saat Anda mengklik Start Lab akan menampilkan durasi ketersediaan resource Google Cloud untuk Anda.

Lab interaktif ini dapat Anda gunakan untuk melakukan aktivitas lab di lingkungan cloud sungguhan, bukan di lingkungan demo atau simulasi. Untuk mengakses lab ini, Anda akan diberi kredensial baru yang bersifat sementara dan dapat digunakan untuk login serta mengakses Google Cloud selama durasi lab.

Untuk menyelesaikan lab ini, Anda memerlukan:

  • Akses ke browser internet standar (disarankan browser Chrome).
Catatan: Gunakan jendela Samaran (direkomendasikan) atau browser pribadi untuk menjalankan lab ini. Hal ini akan mencegah konflik antara akun pribadi Anda dan akun siswa yang dapat menyebabkan tagihan ekstra pada akun pribadi Anda.
  • Waktu untuk menyelesaikan lab. Ingat, setelah dimulai, lab tidak dapat dijeda.
Catatan: Hanya gunakan akun siswa untuk lab ini. Jika Anda menggunakan akun Google Cloud yang berbeda, Anda mungkin akan dikenai tagihan ke akun tersebut.

Cara memulai lab dan login ke Google Cloud Console

  1. Klik tombol Start Lab. Jika Anda perlu membayar lab, dialog akan terbuka untuk memilih metode pembayaran. Di sebelah kiri ada panel Lab Details yang berisi hal-hal berikut:

    • Tombol Open Google Cloud console
    • Waktu tersisa
    • Kredensial sementara yang harus Anda gunakan untuk lab ini
    • Informasi lain, jika diperlukan, untuk menyelesaikan lab ini
  2. Klik Open Google Cloud console (atau klik kanan dan pilih Open Link in Incognito Window jika Anda menjalankan browser Chrome).

    Lab akan menjalankan resource, lalu membuka tab lain yang menampilkan halaman Sign in.

    Tips: Atur tab di jendela terpisah secara berdampingan.

    Catatan: Jika Anda melihat dialog Choose an account, klik Use Another Account.
  3. Jika perlu, salin Username di bawah dan tempel ke dialog Sign in.

    {{{user_0.username | "Username"}}}

    Anda juga dapat menemukan Username di panel Lab Details.

  4. Klik Next.

  5. Salin Password di bawah dan tempel ke dialog Welcome.

    {{{user_0.password | "Password"}}}

    Anda juga dapat menemukan Password di panel Lab Details.

  6. Klik Next.

    Penting: Anda harus menggunakan kredensial yang diberikan lab. Jangan menggunakan kredensial akun Google Cloud Anda. Catatan: Menggunakan akun Google Cloud sendiri untuk lab ini dapat dikenai biaya tambahan.
  7. Klik halaman berikutnya:

    • Setujui persyaratan dan ketentuan.
    • Jangan tambahkan opsi pemulihan atau autentikasi 2 langkah (karena ini akun sementara).
    • Jangan mendaftar uji coba gratis.

Setelah beberapa saat, Konsol Google Cloud akan terbuka di tab ini.

Catatan: Untuk mengakses produk dan layanan Google Cloud, klik Navigation menu atau ketik nama layanan atau produk di kolom Search. Ikon Navigation menu dan kolom Search

Memberikan peran IAM yang diperlukan ke akun layanan Compute Engine

Untuk menetapkan izin penyimpanan ke akun layanan yang diperlukan untuk membuat cluster:

  1. Di Konsol Google Cloud, pada navigation menu (Ikon Navigation menu), pilih IAM & Admin > IAM.

  2. Klik Edit principal (ikon pensil) untuk Compute Engine default service account ([project-number]-compute@developer.gserviceaccount.com).

  3. Klik + Add another role.

  4. Untuk Select a role, cari Storage Admin, lalu pilih dari hasilnya.

  5. Klik Save.

Tugas 1. Membuat cluster

  1. Di konsol Google Cloud, pada navigation menu (Navigation menu), klik View All Products. Di bagian Analytics, klik Managed Apache Spark.

Navigation menu yang diperluas yang menandai submenu Managed Apache Spark dan opsi Cluster

  1. Untuk membuat cluster baru, klik Clusters > Create cluster.

Menu Managed Service untuk Apache Spark dengan tombol Create Cluster yang ditandai

  1. Tetapkan nilai untuk parameter yang tercantum di bawah, dan biarkan setelan default untuk parameter lainnya:
Parameter Nilai
Name
Region
Zone
Luaskan Advanced configurations > Infrastructure, untuk Manager node > Primary disk type Standard Persistent Disk
Manager node - Series E2
Manager node - Machine type
Manager node - Primary disk size 30 GB
Jumlah Worker Node 2
Worker node - Primary disk type Standard Persistent Disk
Worker node - Series E2
Worker node - Machine type
Worker node - Primary disk size 30 GB
Perluas Other > Internal IP only Batalkan pilihan Configure all instances to have only internal IP addresses
  1. Klik Create untuk membuat cluster yang baru. Status akan berubah dari Provisioning menjadi Succeeded. Anda dapat melanjutkan aktivitas ke langkah berikutnya setelah output yang muncul terlihat seperti ini:
Catatan: Anda dapat mengabaikan peringatan Sorry, the server was not able to fulfill your request dan melanjutkan tahap ke tugas berikutnya..

Halaman Clusters yang menampilkan status cluster lab sebagai Running

Menguji tugas yang sudah selesai

Klik Periksa progres saya untuk memverifikasi tugas yang telah dijalankan.

Membuat cluster.

Tugas 2. Mengirimkan tugas ke cluster Anda

  1. Pilih Jobs untuk beralih ke tampilan tugas Managed Service untuk Apache Spark:

Menu Managed Service untuk Apache Spark yang diperluas dengan opsi Jobs ditandai

  1. Klik Submit job:

Halaman Managed Service untuk Apache Spark dengan tombol Submit Job yang ditandai

  1. Tetapkan nilai untuk parameter yang tercantum di bawah, dan biarkan setelan default untuk parameter lainnya:
Parameter Nilai
Region
Cluster
Job type
Main class or jar
Jar files
Arguments
  1. Klik Submit.

Tugas akan muncul dalam daftar Jobs, yang menampilkan tugas project Anda beserta cluster, jenis, dan status terkini. Tugas baru akan ditampilkan sebagai "Running". Saat melihat "Succeeded" sebagai status, Anda dapat melanjutkan aktivitas ke langkah berikutnya.

Menguji tugas yang sudah selesai

Klik Periksa progres saya untuk memverifikasi tugas yang telah dijalankan.

Mengirimkan tugas ke cluster Anda.
  1. Untuk melihat output tugas yang sudah selesai, klik ID tugas di daftar Jobs:

Halaman Jobs yang menampilkan status job-11c593c3 sebagai Succeeded

  1. Agar tidak perlu melakukan scrolling, ubah Line Wrap menjadi ON:

Opsi Line Wrap: On yang ditandai di halaman output Job

Anda akan melihat bahwa tugas Anda berhasil menghitung perkiraan nilai pi!

Tugas 3. Mematikan cluster

  1. Anda dapat mematikan cluster di halaman Clusters:

Menu Managed Service untuk Apache Spark dengan opsi Clusters yang ditandai

  1. Centang kotak di samping cluster qlab, lalu klik Delete:

Halaman Clusters dengan tombol hapus ditandai

  1. Klik CONFIRM untuk mengonfirmasi penghapusan.

Tugas 4. Menguji pemahaman Anda

Di bawah ini terdapat beberapa pertanyaan pilihan ganda untuk memperkuat pemahaman Anda tentang konsep-konsep dalam lab ini. Jawab pertanyaan tersebut sebaik mungkin.

Selamat!

Anda telah mempelajari cara membuat cluster Managed Service untuk Apache Spark, mengirimkan tugas Spark, dan mematikan cluster.

Langkah berikutnya/Pelajari lebih lanjut

Sertifikasi dan pelatihan Google Cloud

...membantu Anda mengoptimalkan teknologi Google Cloud. Kelas kami mencakup keterampilan teknis dan praktik terbaik untuk membantu Anda memahami dengan cepat dan melanjutkan proses pembelajaran. Kami menawarkan pelatihan tingkat dasar hingga lanjutan dengan opsi on demand, live, dan virtual untuk menyesuaikan dengan jadwal Anda yang sibuk. Sertifikasi membantu Anda memvalidasi dan membuktikan keterampilan serta keahlian Anda dalam teknologi Google Cloud.

Manual Terakhir Diperbarui pada 28 April 2026

Lab Terakhir Diuji pada 28 April 2026

Hak cipta 2026 Google LLC. Semua hak dilindungi undang-undang. Google dan logo Google adalah merek dagang dari Google LLC. Semua nama perusahaan dan produk lain mungkin adalah merek dagang masing-masing perusahaan yang bersangkutan.

Sebelum memulai

  1. Lab membuat project dan resource Google Cloud untuk jangka waktu tertentu
  2. Lab memiliki batas waktu dan tidak memiliki fitur jeda. Jika lab diakhiri, Anda harus memulainya lagi dari awal.
  3. Di kiri atas layar, klik Start lab untuk memulai

Gunakan penjelajahan rahasia

  1. Salin Nama Pengguna dan Sandi yang diberikan untuk lab tersebut
  2. Klik Open console dalam mode pribadi

Login ke Konsol

  1. Login menggunakan kredensial lab Anda. Menggunakan kredensial lain mungkin menyebabkan error atau dikenai biaya.
  2. Setujui persyaratan, dan lewati halaman resource pemulihan
  3. Jangan klik End lab kecuali jika Anda sudah menyelesaikan lab atau ingin mengulanginya, karena tindakan ini akan menghapus pekerjaan Anda dan menghapus project

Konten ini tidak tersedia untuk saat ini

Kami akan memberi tahu Anda melalui email saat konten tersedia

Bagus!

Kami akan menghubungi Anda melalui email saat konten tersedia

Satu lab dalam satu waktu

Konfirmasi untuk mengakhiri semua lab yang ada dan memulai lab ini

Gunakan penjelajahan rahasia untuk menjalankan lab

Menggunakan jendela Samaran atau browser pribadi adalah cara terbaik untuk menjalankan lab ini. Langkah ini akan mencegah konflik antara akun pribadi Anda dan akun Siswa, yang dapat menyebabkan tagihan ekstra pada akun pribadi Anda.