GSP123

Ringkasan

Managed Service untuk Apache Spark adalah layanan Spark dan Hadoop terkelola yang membantu Anda memanfaatkan alat data open source untuk batch processing, pembuatan kueri, streaming, dan machine learning. Otomatisasi Managed Service untuk Apache Spark membantu Anda membuat cluster dengan cepat, mengelolanya dengan mudah, dan menghemat biaya dengan menonaktifkan cluster saat tidak diperlukan. Dengan berkurangnya waktu dan biaya untuk urusan administrasi, Anda dapat lebih berfokus pada tugas dan data Anda.

Lab ini diadaptasi dari Panduan membuat cluster Managed Service untuk Apache Spark menggunakan konsol Google Cloud.

Yang akan Anda pelajari

• Membuat cluster Managed Service untuk Apache Spark (dengan Apache Spark bawaan).
• Mengirimkan tugas Spark.
• Mematikan cluster Anda.

Penyiapan dan persyaratan

Sebelum mengklik tombol Start Lab

Baca petunjuk ini. Lab memiliki timer dan Anda tidak dapat menjedanya. Timer yang dimulai saat Anda mengklik Start Lab akan menampilkan durasi ketersediaan resource Google Cloud untuk Anda.

Lab interaktif ini dapat Anda gunakan untuk melakukan aktivitas lab di lingkungan cloud sungguhan, bukan di lingkungan demo atau simulasi. Untuk mengakses lab ini, Anda akan diberi kredensial baru yang bersifat sementara dan dapat digunakan untuk login serta mengakses Google Cloud selama durasi lab.

Untuk menyelesaikan lab ini, Anda memerlukan:

• Akses ke browser internet standar (disarankan browser Chrome).

• Waktu untuk menyelesaikan lab. Ingat, setelah dimulai, lab tidak dapat dijeda.

Cara memulai lab dan login ke Konsol Google Cloud

1. Klik tombol Start Lab. Jika Anda perlu membayar lab, dialog akan terbuka untuk memilih metode pembayaran. Di sebelah kanan terdapat panel Lab setup and access yang berisi hal-hal berikut:

   • Tombol Open Google Cloud console
   • Kredensial sementara (nama pengguna dan sandi) yang harus Anda gunakan untuk lab ini
   • Informasi lain, jika diperlukan, untuk menyelesaikan lab ini

   Perhatikan bahwa timer lab terletak di dekat bagian atas halaman, yang menampilkan waktu yang tersisa.

2. Klik Open Google Cloud console (atau klik kanan dan pilih Open Link in Incognito Window jika Anda menjalankan browser Chrome).

   Lab akan menjalankan resource, lalu membuka tab lain yang menampilkan halaman Sign in.

   Tips: Atur tab di jendela terpisah secara berdampingan.

   Catatan: Jika Anda melihat dialog Choose an account, klik Use Another Account.

3. Jika perlu, salin Username di bawah dan tempel ke dialog Sign in.

   {{{user_0.username | "Username"}}}

   Anda juga dapat menemukan Username di panel Lab setup and access.

4. Klik Next.

5. Salin Password di bawah dan tempel ke dialog Welcome.

   {{{user_0.password | "Password"}}}

   Anda juga dapat menemukan Password di panel Lab setup and access.

6. Klik Next.

   Penting: Anda harus menggunakan kredensial yang diberikan lab. Jangan menggunakan kredensial akun Google Cloud Anda. Catatan: Penggunaan akun Google Cloud sendiri untuk lab ini mungkin dikenai biaya tambahan.

7. Klik untuk melanjutkan ke halaman berikutnya:

   • Setujui persyaratan dan ketentuan.
   • Jangan tambahkan opsi pemulihan atau autentikasi 2 langkah (karena ini akun sementara).
   • Jangan daftar uji coba gratis.

Setelah beberapa saat, Konsol Google Cloud akan terbuka di tab ini.

Catatan: Untuk mengakses produk dan layanan Google Cloud, klik Navigation menu atau ketik nama layanan atau produk di kolom Search.

Mengaktifkan Cloud Shell

Cloud Shell adalah mesin virtual yang dilengkapi dengan berbagai alat pengembangan. Mesin virtual ini menawarkan direktori beranda persisten berkapasitas 5 GB dan berjalan di Google Cloud. Cloud Shell menyediakan akses command-line untuk resource Google Cloud Anda.

1. Klik Activate Cloud Shell di bagian atas Konsol Google Cloud.

2. Klik jendela berikut:

   • Lanjutkan melalui jendela informasi Cloud Shell.
   • Beri otorisasi ke Cloud Shell untuk menggunakan kredensial Anda guna melakukan panggilan Google Cloud API.

Setelah terhubung, Anda sudah diautentikasi, dan project ditetapkan ke Project_ID, . Output berisi baris yang mendeklarasikan Project_ID untuk sesi ini:

gcloud adalah alat command line untuk Google Cloud. Alat ini sudah terinstal di Cloud Shell dan mendukung pelengkapan command line.

3. (Opsional) Anda dapat menampilkan daftar nama akun yang aktif dengan perintah ini:

4. Klik Authorize.

Output:

5. (Opsional) Anda dapat menampilkan daftar ID project dengan perintah ini:

Output:

Memberikan peran IAM yang diperlukan ke akun layanan Compute Engine

Untuk menetapkan izin penyimpanan ke akun layanan yang diperlukan untuk membuat cluster:

1. Di Konsol Google Cloud, di menu navigasi (), pilih IAM & Admin > IAM.

2. Klik Edit principal (ikon pensil) untuk Compute Engine default service account ([project-number]-compute@developer.gserviceaccount.com).

3. Klik + Add another role.

4. Untuk Select a role, cari Storage Admin, lalu pilih dari hasilnya.

5. Klik Save.

Tugas 1. Membuat cluster

• Di Cloud Shell, jalankan perintah berikut untuk membuat cluster (jika diminta, klik Authorize):

Tunggu beberapa menit hingga penyediaan selesai. Setelah selesai, output akan mengonfirmasi bahwa cluster telah dibuat:

Menguji tugas yang sudah selesai

Klik Periksa progres saya untuk memverifikasi tujuan.

Tugas 2. Mengirimkan tugas ke cluster Anda

1. Di konsol Google Cloud, pada menu navigasi (), klik View All Products. Di bagian Analytics, klik Managed Apache Spark.

2. Pilih Jobs untuk beralih ke tampilan tugas Managed Service untuk Apache Spark:

3. Klik Submit job:

4. Tetapkan nilai untuk parameter yang tercantum di bawah, dan biarkan setelan default untuk parameter lainnya:

5. Klik Submit.

Tugas akan muncul dalam daftar Jobs, yang menampilkan tugas project Anda beserta cluster, jenis, dan status terkini. Tugas baru akan ditampilkan sebagai "Running". Saat melihat "Succeeded" sebagai status, Anda dapat melanjutkan aktivitas ke langkah berikutnya.

Menguji tugas yang sudah selesai

Klik Periksa progres saya untuk memverifikasi tugas yang telah dijalankan.

5. Untuk melihat output tugas yang sudah selesai, klik ID pekerjaan di daftar Jobs:

6. Agar tidak perlu melakukan scrolling, ubah Line Wrap menjadi ON:

Anda akan melihat bahwa tugas Anda berhasil menghitung perkiraan nilai pi!

Tugas 3. Mematikan cluster

1. Anda dapat mematikan cluster di halaman Clusters:

2. Centang kotak di samping cluster qlab, lalu klik Delete:

3. Klik CONFIRM untuk mengonfirmasi penghapusan.

Tugas 4. Menguji pemahaman Anda

Di bawah ini terdapat beberapa pertanyaan pilihan ganda untuk memperkuat pemahaman Anda tentang konsep-konsep dalam lab ini. Jawab pertanyaan tersebut sebaik mungkin.

Selamat!

Anda telah mempelajari cara membuat cluster Managed Service untuk Apache Spark, mengirimkan tugas Spark, dan mematikan cluster.

Langkah berikutnya/Pelajari lebih lanjut

• Pelajari lebih lanjut Managed Service untuk Apache Spark dengan membuka dokumentasi Managed Service untuk Apache Spark.

Sertifikasi dan pelatihan Google Cloud

...membantu Anda mengoptimalkan teknologi Google Cloud. Kelas kami mencakup keterampilan teknis dan praktik terbaik untuk membantu Anda memahami dengan cepat dan melanjutkan proses pembelajaran. Kami menawarkan pelatihan tingkat dasar hingga lanjutan dengan opsi on demand, live, dan virtual untuk menyesuaikan dengan jadwal Anda yang sibuk. Sertifikasi membantu Anda memvalidasi dan membuktikan keterampilan serta keahlian Anda dalam teknologi Google Cloud.

Manual Terakhir Diperbarui pada 18 Mei 2026

Lab Terakhir Diuji pada 28 April 2026

Hak cipta 2026 Google LLC. Semua hak dilindungi undang-undang. Google dan logo Google adalah merek dagang dari Google LLC. Semua nama perusahaan dan produk lain mungkin adalah merek dagang masing-masing perusahaan yang bersangkutan.