GSP1278

Ringkasan

Lab ini menyediakan eksplorasi yang komprehensif tentang Gemini, model AI multimodal canggih dari Google. Dengan menggunakan Google Gen AI SDK for Python, Anda akan mempelajari cara berinteraksi dengan model ini melalui Gemini API, yang mencakup berbagai modalitas individual, termasuk teks, PDF, gambar, video, kode, dan audio. Kemudian, Anda akan mempelajari cara menggabungkan beberapa modalitas, yang menunjukkan kemampuan Gemini untuk memproses dan menganalisis berbagai format data secara bersamaan. Terakhir, Anda akan mempelajari kasus penggunaan retail/e-commerce di dunia nyata. Hal ini menunjukkan penerapan praktis Gemini dalam menghasilkan rekomendasi dan meningkatkan pengalaman pelanggan.

Gemini

Gemini adalah rangkaian model AI generatif canggih yang dikembangkan oleh Google DeepMind. Gemini mampu memahami dan menghasilkan berbagai bentuk konten, termasuk teks, kode, gambar, audio, dan video.

Gemini API di Vertex AI

Gemini API di Vertex AI menyediakan antarmuka terpadu untuk berinteraksi dengan model Gemini. Dengan antarmuka ini, developer dapat dengan mudah mengintegrasikan kemampuan AI yang hebat ini ke dalam aplikasi mereka. Untuk mengetahui detail terbaru dan fitur spesifik dari versi terbaru, pelajari dokumentasi Gemini yang resmi.

Model Gemini

• Gemini Pro: Dirancang untuk melakukan penalaran yang kompleks, termasuk di antaranya:
  • Menganalisis dan meringkas informasi dalam jumlah besar.
  • Penalaran canggih lintas modalitas (untuk teks, kode, gambar, dll.).
  • Pemecahan masalah yang efektif dengan codebase yang kompleks.
• Gemini Flash: Dioptimalkan untuk kecepatan dan efisiensi, dengan menawarkan:
  • Waktu respons kurang dari satu detik dan throughput tinggi.
  • Kualitas tinggi dengan biaya yang lebih rendah untuk beragam tugas.
  • Kemampuan multimodal yang ditingkatkan, termasuk pemahaman spasial yang lebih baik, modalitas output yang baru (teks, audio, gambar), dan penggunaan alat asli (Google Penelusuran, eksekusi kode, dan fungsi pihak ketiga).

Prasyarat

Sebelum memulai lab ini, Anda sebaiknya sudah mengetahui:

• Pemrograman Python dasar.
• Konsep API secara umum.
• Cara menjalankan kode Python di notebook Jupyter di Vertex AI Workbench.

Tujuan

Di lab ini, Anda akan mempelajari cara menggunakan Google Gen AI SDK for Python agar dapat berinteraksi dengan model Gemini untuk:

• Mencakup skenario teks, PDF, gambar, video, kode, dan audio individual
• Mempertimbangkan berbagai kombinasi modalitas
• Menjalankan kasus penggunaan e-commerce
• Membandingkan gambar untuk mencari persamaan, anomali, atau perbedaan
• Memahami hubungan Entity dalam diagram teknis

Penyiapan dan persyaratan

Sebelum mengklik tombol Start Lab

Baca petunjuk ini. Lab memiliki timer dan Anda tidak dapat menjedanya. Timer yang dimulai saat Anda mengklik Start Lab akan menampilkan durasi ketersediaan resource Google Cloud untuk Anda.

Lab interaktif ini dapat Anda gunakan untuk melakukan aktivitas lab di lingkungan cloud sungguhan, bukan di lingkungan demo atau simulasi. Untuk mengakses lab ini, Anda akan diberi kredensial baru yang bersifat sementara dan dapat digunakan untuk login serta mengakses Google Cloud selama durasi lab.

Untuk menyelesaikan lab ini, Anda memerlukan:

• Akses ke browser internet standar (disarankan browser Chrome).

Catatan: Gunakan jendela Samaran (direkomendasikan) atau browser pribadi untuk menjalankan lab ini. Hal ini akan mencegah konflik antara akun pribadi Anda dan akun siswa yang dapat menyebabkan tagihan ekstra pada akun pribadi Anda.

• Waktu untuk menyelesaikan lab. Ingat, setelah dimulai, lab tidak dapat dijeda.

Catatan: Hanya gunakan akun siswa untuk lab ini. Jika Anda menggunakan akun Google Cloud yang berbeda, Anda mungkin akan dikenai tagihan ke akun tersebut.

Cara memulai lab dan login ke Google Cloud Console

1. Klik tombol Start Lab. Jika Anda perlu membayar lab, dialog akan terbuka untuk memilih metode pembayaran. Di sebelah kiri ada panel Lab Details yang berisi hal-hal berikut:

   • Tombol Open Google Cloud console
   • Waktu tersisa
   • Kredensial sementara yang harus Anda gunakan untuk lab ini
   • Informasi lain, jika diperlukan, untuk menyelesaikan lab ini

2. Klik Open Google Cloud console (atau klik kanan dan pilih Open Link in Incognito Window jika Anda menjalankan browser Chrome).

   Lab akan menjalankan resource, lalu membuka tab lain yang menampilkan halaman Sign in.

   Tips: Atur tab di jendela terpisah secara berdampingan.

   Catatan: Jika Anda melihat dialog Choose an account, klik Use Another Account.

3. Jika perlu, salin Username di bawah dan tempel ke dialog Sign in.

   {{{user_0.username | "Username"}}}

   Anda juga dapat menemukan Username di panel Lab Details.

4. Klik Next.

5. Salin Password di bawah dan tempel ke dialog Welcome.

   {{{user_0.password | "Password"}}}

   Anda juga dapat menemukan Password di panel Lab Details.

6. Klik Next.

   Penting: Anda harus menggunakan kredensial yang diberikan lab. Jangan menggunakan kredensial akun Google Cloud Anda. Catatan: Menggunakan akun Google Cloud sendiri untuk lab ini dapat dikenai biaya tambahan.

7. Klik halaman berikutnya:

   • Setujui persyaratan dan ketentuan.
   • Jangan tambahkan opsi pemulihan atau autentikasi 2 langkah (karena ini akun sementara).
   • Jangan mendaftar uji coba gratis.

Setelah beberapa saat, Konsol Google Cloud akan terbuka di tab ini.

Catatan: Untuk mengakses produk dan layanan Google Cloud, klik Navigation menu atau ketik nama layanan atau produk di kolom Search.

Tugas 1. Membuka notebook di Vertex AI Workbench

1. Di Konsol Google Cloud, pada Navigation menu (), klik Vertex AI > Workbench.

2. Cari instance lalu klik tombol Open JupyterLab.

Antarmuka JupyterLab untuk instance Workbench Anda akan terbuka di tab browser baru.

Catatan: Jika Anda tidak melihat notebook di JupyterLab, ikuti langkah tambahan berikut untuk mereset instance:

1. Tutup tab browser untuk JupyterLab, lalu kembali ke halaman beranda Workbench.

2. Pilih kotak centang di samping nama instance, lalu klik Reset.

3. Setelah tombol Open JupyterLab diaktifkan kembali, tunggu satu menit, lalu klik Open JupyterLab.

Tugas 2. Menyiapkan notebook

1. Buka file .

2. Pada dialog Select Kernel, pilih Python 3 dari daftar kernel yang tersedia.

3. Jalankan bagian Getting Started pada notebook. Project ID dan Lokasi telah dikonfigurasi sebelumnya untuk Anda.

Catatan: Jika Anda mendapatkan respons 429 dari salah satu eksekusi sel notebook, tunggu 1 menit sebelum menjalankan sel kembali untuk melanjutkan.

Klik Periksa progres saya untuk memverifikasi tujuan. Menginstal paket dan mengimpor library

Tugas 3. Modalitas Individual

Di bagian ini, Anda akan mempelajari berbagai modalitas yang didukung oleh Gemini.

1. Jalankan bagian Individual Modalities pada notebook.

Klik Periksa progres saya untuk memverifikasi tujuan. Modalitas individual pada teks, PDF, dan gambar

Klik Periksa progres saya untuk memverifikasi tujuan. Modalitas individual pada video

Klik Periksa progres saya untuk memverifikasi tujuan. Modalitas individual pada audio

Catatan: Jika Anda mendapatkan respons ClientError 499 saat menjalankan sel notebook, yang menunjukkan bahwa tugas dibatalkan sebelum selesai, coba jalankan kembali sel kode tersebut.

Klik Periksa progres saya untuk memverifikasi tujuan. Modalitas individual pada codebase

Tugas 4. Menggabungkan Beberapa Modalitas

Di bagian ini, Anda akan mempelajari cara melakukan interleaving pada beberapa modalitas menggunakan Gemini.

1. Jalankan bagian Combining multiple modalities pada notebook.

Klik Periksa progres saya untuk memverifikasi tujuan. Menggabungkan beberapa modalitas sekaligus

Tugas 5. Kasus Penggunaan: Retail/E-commerce

Di bagian ini, Anda akan mempelajari kasus penggunaan Gemini untuk membuat rekomendasi retail.

1. Jalankan bagian Use Case: retail / e-commerce pada notebook.

Klik Periksa progres saya untuk memverifikasi tujuan. Kasus penggunaan e-commerce

Tugas 6. Kasus Penggunaan: Hubungan entity dalam diagram teknis

Di bagian ini, Anda akan mempelajari kasus penggunaan Gemini untuk memahami diagram dan mengambil langkah-langkah yang dapat ditindaklanjuti, seperti pengoptimalan atau pembuatan kode.

1. Jalankan bagian Use Case: Entity relationships in technical diagrams pada notebook.

Klik Periksa progres saya untuk memverifikasi tujuan. Hubungan entity dalam diagram teknis

Tugas 7. Kasus Penggunaan: Membandingkan gambar untuk mencari persamaan, anomali, atau perbedaan

Di bagian ini, Anda akan mempelajari kasus penggunaan Gemini untuk membandingkan gambar dan mengidentifikasi kesamaan atau perbedaan antarobjek.

1. Jalankan bagian Use Case: Similarity/Differences pada notebook.

Klik Periksa progres saya untuk memverifikasi tujuan. Membandingkan gambar untuk mencari persamaan, anomali, atau perbedaan

Selamat!

Di lab ini, Anda telah mempelajari cara menggunakan model Gemini untuk kasus penggunaan multimodal. Anda dapat menemukan informasi selengkapnya tentang Gemini di situs dokumentasi Vertex AI yang tercantum di bawah.

Langkah berikutnya/pelajari lebih lanjut

Baca referensi berikut untuk mempelajari Gemini lebih lanjut:

• Ringkasan Gemini
• Dokumentasi AI generatif di Vertex AI
• AI Generatif di YouTube
• Jelajahi Cookbook Vertex AI untuk melihat galeri notebook AI Generatif pilihan yang dapat Anda telusuri.
• Jelajahi notebook dan sampel lainnya di repositori AI Generatif Google Cloud.

Sertifikasi dan pelatihan Google Cloud

...membantu Anda mengoptimalkan teknologi Google Cloud. Kelas kami mencakup keterampilan teknis dan praktik terbaik untuk membantu Anda memahami dengan cepat dan melanjutkan proses pembelajaran. Kami menawarkan pelatihan tingkat dasar hingga lanjutan dengan opsi on demand, live, dan virtual untuk menyesuaikan dengan jadwal Anda yang sibuk. Sertifikasi membantu Anda memvalidasi dan membuktikan keterampilan serta keahlian Anda dalam teknologi Google Cloud.

Manual Terakhir Diperbarui pada 14 Oktober 2025

Lab Terakhir Diuji pada 14 Oktober 2025

Hak cipta 2025 Google LLC. Semua hak dilindungi undang-undang. Google dan logo Google adalah merek dagang dari Google LLC. Semua nama perusahaan dan produk lain mungkin adalah merek dagang masing-masing perusahaan yang bersangkutan.