GSP524

Ringkasan

Dalam challenge lab, Anda diberi sebuah skenario dan serangkaian tugas. Tidak ada petunjuk langkah demi langkah. Anda akan menggunakan keahlian yang dipelajari dari lab dalam kursus untuk mencari cara menyelesaikan sendiri tugas-tugas tersebut. Sistem pemberian skor otomatis (ditampilkan pada halaman ini) akan memberikan masukan tentang apakah Anda telah menyelesaikan tugas dengan benar atau tidak.

Saat mengikuti challenge lab, Anda tidak akan diajari konsep-konsep baru Google Cloud. Anda diharapkan dapat memperluas keahlian yang dipelajari, seperti mengubah nilai default dan membaca serta mengkaji pesan error untuk memperbaiki kesalahan Anda sendiri.

Untuk meraih skor 100%, Anda harus berhasil menyelesaikan semua tugas dalam jangka waktu tertentu.

Lab ini direkomendasikan bagi siswa yang sudah mendaftar di kursus Menganalisis dan Melakukan Penalaran atas Data Multimodal dengan Gemini. Apakah Anda siap menghadapi tantangan ini?

Prasyarat

Sebelum memulai lab ini, Anda sebaiknya sudah mengetahui:

• Pemrograman Python dasar.
• Konsep API secara umum.
• Cara menjalankan kode Python di notebook Jupyter di Vertex AI Workbench.

Topik yang diujikan

Dalam tantangan ini, Anda akan menggunakan model untuk:

• Membuat dan menjalankan perintah multimodal kompleks untuk menganalisis data teks, gambar, audio, dan video.
• Mengekstrak informasi terstruktur (misalnya skor sentimen, tema utama, deteksi objek, karakteristik audio, pengenalan tindakan) dari data multimodal.
• Menyintesis insight dari beberapa modalitas data untuk menarik kesimpulan yang bermakna dan memberikan rekomendasi yang dapat ditindaklanjuti.
• Memformat output model ke dalam laporan Markdown terstruktur untuk menyampaikan temuan secara efektif.

Penyiapan dan persyaratan

Sebelum mengklik tombol Start Lab

Baca petunjuk ini. Lab memiliki timer dan Anda tidak dapat menjedanya. Timer yang dimulai saat Anda mengklik Start Lab akan menampilkan durasi ketersediaan resource Google Cloud untuk Anda.

Lab interaktif ini dapat Anda gunakan untuk melakukan aktivitas lab di lingkungan cloud sungguhan, bukan di lingkungan demo atau simulasi. Untuk mengakses lab ini, Anda akan diberi kredensial baru yang bersifat sementara dan dapat digunakan untuk login serta mengakses Google Cloud selama durasi lab.

Untuk menyelesaikan lab ini, Anda memerlukan:

• Akses ke browser internet standar (disarankan browser Chrome).

• Waktu untuk menyelesaikan lab. Ingat, setelah dimulai, lab tidak dapat dijeda.

Skenario tantangan

Cymbal Direct: Menganalisis interaksi media sosial untuk peluncuran produk baru

Cymbal Direct baru saja meluncurkan lini baru pakaian olahraga yang dirancang untuk meningkatkan performa selama berbagai aktivitas. Untuk mengukur persepsi publik dan potensi dampak pasar, Cymbal Direct ditugaskan untuk menganalisis interaksi media sosial di berbagai platform. Analisis ini mencakup:

• Teks: Menganalisis ulasan pelanggan dan postingan media sosial untuk mengetahui sentimen dan tema utama.
• Gambar: Menganalisis gambar yang diposting oleh influencer dan pelanggan yang mengenakan pakaian untuk mengidentifikasi tren gaya dan pola penggunaan.
• Audio Menganalisis klip audio dari episode podcast wawancara terbaru tentang peluncuran produk baru Cymbal Direct.

Tujuannya adalah untuk memberikan insight yang dapat ditindaklanjuti kepada Cymbal Direct guna meningkatkan strategi pemasaran mereka, meningkatkan kualitas produk, dan memperkuat positioning produk. Apakah Anda siap menghadapi tantangan ini?

Tugas 1. Membuka notebook di Vertex AI Workbench

1. Di Konsol Google Cloud, pada Navigation menu (), klik Vertex AI > Workbench.

2. Cari instance lalu klik tombol Open JupyterLab.

Antarmuka JupyterLab untuk instance Workbench Anda akan terbuka di tab browser baru.

3. Klik file .

4. Pada dialog Select Kernel, pilih Python 3 dari daftar kernel yang tersedia.

5. Selesaikan Task 1 di notebook untuk mengimpor library dan menginstal Gen AI SDK.

Setelah menyelesaikan Task 1 dan menyiapkan lingkungan, Anda siap untuk berlanjut ke bagian berikutnya.

Untuk tugas berikutnya, Anda harus melengkapi bagian yang kosong dari tiap sel agar dapat berlanjut ke bagian berikutnya. Bagian yang kosong akan ditandai dengan TODO dan petunjuk untuk menyelesaikannya.

Klik Check my progress untuk memverifikasi tujuan. Mengimpor library yang diperlukan dan menyiapkan Gen AI SDK.

Tugas 2. Menganalisis dan melakukan penalaran atas data teks

Di tugas ini, Anda akan mengumpulkan informasi tentang pakaian olahraga baru dari Cymbal Direct menggunakan model untuk menganalisis ulasan pelanggan dan postingan media sosial dalam format teks. Kemudian, Anda akan menyimpan temuan dari model ke dalam file Markdown untuk digunakan dalam laporan komprehensif di tugas terakhir.

Di notebook, gunakan sel di bagian Task 2. Analyze and reason on customer feedback (text) untuk tugas ini.

Analisis awal dengan

Di bagian Initial Analysis with dalam notebook:

1. Di sel notebook, di bagian 3. Construct the prompt for Gemini, isi TODOs untuk membuat perintah yang menginstruksikan model Gemini untuk menganalisis ulasan pelanggan dan postingan media sosial.

2. Di sel notebook, di bagian 4. Send the prompt go Gemini, isi TODOs untuk mengirim perintah dan data teks ke model Gemini.

Klik Periksa progres saya untuk memverifikasi tujuan. Analisis Awal dengan .

Mempelajari secara mendalam dengan : Melakukan penalaran atas sentimen pelanggan

Di bagian ini, Anda akan menggunakan penalaran Gemini untuk mempelajari sentimen pelanggan secara lebih mendalam dan mengidentifikasi area utama yang perlu ditingkatkan. Yang menarik adalah alasan di balik ulasan positif dan negatif serta pengungkapan tema berulang yang mungkin tidak langsung terlihat.

1. Di notebook, di bagian Deep Dive with : Reasoning on Customer Sentiment, di bagian 1. Construct the prompt for Gemini, isi TODOs untuk membuat perintah yang menginstruksikan model Gemini untuk menganalisis ulasan pelanggan dan postingan media sosial secara lebih mendetail.

2. Di bagian 2. Use Gemini Thinking for deeper reasoning, isi TODOs untuk mengirim perintah dan data teks ke model Gemini.

Klik Periksa progres saya untuk memverifikasi tujuan. Mempelajari secara mendalam dengan : Melakukan penalaran atas sentimen pelanggan.

Tugas 3. Menganalisis dan melakukan penalaran atas konten visual

Di tugas ini, Anda akan menggunakan model untuk menganalisis gambar terkait lini pakaian olahraga baru dari Cymbal Direct. Sasarannya adalah mengidentifikasi tren gaya dan perilaku pelanggan berdasarkan gambar. Anda akan menyimpan temuan dari model ke file markdown yang akan digunakan untuk laporan komprehensif dalam tugas terakhir.

Di notebook, gunakan sel di bagian Task 3. Analyze and reason on visual content: Style trends and customer behavior untuk tugas ini.

Analisis Awal dengan

1. Di notebook, di bagian Initial Analysis with , di bagian 3. Construct the prompt for Gemini, isi TODOs untuk membuat perintah yang menginstruksikan model Gemini untuk menganalisis gambar lini pakaian olahraga baru dari Cymbal Direct.

2. Di bagian 4. Send the prompt and images to Gemini, isi TODOs untuk mengirim perintah dan gambar ke model Gemini.

Klik Periksa progres saya untuk memverifikasi tujuan. Analisis Awal dengan .

Melakukan penalaran atas tren gambar dengan

Anda sekarang akan menggunakan penalaran Gemini untuk melakukan analisis yang lebih mendalam atas elemen visual, melakukan inferensi atas konteks, target audiens, dan potensi dampaknya terhadap pemasaran.

1. Di notebook, di bagian Reasoning on image trends with , di bagian 1. Construct the prompt for Gemini, isi TODOs untuk membuat perintah yang menginstruksikan model Gemini untuk menganalisis gambar secara lebih mendetail.

2. Di bagian "2. Use Gemini thinking for deeper reasoning", isi TODOs untuk mengirim perintah dan gambar ke model Gemini.

Klik Periksa progres saya untuk memverifikasi tujuan. Melakukan Penalaran atas Tren Gambar dengan .

Tugas 4. Menganalisis dan melakukan penalaran atas konten audio

Di tugas ini, Anda akan menggunakan model untuk menganalisis podcast tentang lini pakaian baru dari Cymbal Direct. Anda akan mengekstrak informasi/sentimen dari podcast tersebut dan menggunakannya untuk menghasilkan insight bagi perusahaan. Kemudian, Anda akan menyimpan temuan dari model ke dalam file Markdown untuk digunakan dalam laporan komprehensif di tugas terakhir.

Klip audio ini berasal dari episode podcast yang menampilkan wawancara perwakilan Cymbal Direct yang membahas lini pakaian olahraga yang baru. Percakapan tersebut mencakup berbagai aspek pakaian, termasuk desain, fitur, target audiens, dan strategi pemasaran.

Di notebook, gunakan sel di bagian Task 4. Analyze and reason on audio content: Customer perceptions untuk tugas ini.

Analisis awal dengan

1. Di notebook, di bagian Initial analysis with , di bagian 1. Construct the prompt for Gemini, isi TODOs untuk membuat perintah yang menginstruksikan model Gemini untuk menganalisis rekaman audio percakapan tentang lini pakaian olahraga baru dari Cymbal Direct.

2. Di bagian 2. Send the prompt and audio to Gemini, isi TODOs untuk mengirim perintah dan data audio ke model Gemini.

Klik Periksa progres saya untuk memverifikasi tujuan. Analisis Awal dengan .

Melakukan penalaran atas insight audio dengan

Di bagian ini, Anda akan menggunakan penalaran Gemini untuk menganalisis percakapan pada tingkat yang lebih mendalam, melakukan penalaran atas kepuasan pelanggan, menyimpulkan faktor yang berpengaruh, dan menghasilkan rekomendasi berbasis data.

1. Di notebook, di bagian Reasoning on Audio Insights with , di bagian 1. Construct the prompt for Gemini, isi TODOs untuk membuat perintah yang menginstruksikan model Gemini untuk menganalisis rekaman audio secara lebih mendetail.

2. Di bagian 2. Use Gemini thinking for deeper reasoning, isi TODOs untuk mengirim perintah dan data audio ke model Gemini.

Klik Periksa progres saya untuk memverifikasi tujuan. Melakukan Penalaran atas Insight Audio dengan .

Tugas 5. Menyintesis insight multimodal

Di tugas terakhir ini, Anda akan menyintesis insight yang diperoleh dari analisis sebelumnya atas data teks, gambar, dan audio. Anda akan menggunakan model untuk membuat laporan komprehensif yang menggabungkan temuan dari tiap modalitas, sehingga memberikan gambaran menyeluruh atas sentimen pelanggan, preferensi gaya, dan tren utama yang terkait dengan lini pakaian olahraga baru Cymbal Direct.

Kemudian, Anda akan menyimpan laporan akhir yang dihasilkan oleh model ke dalam file markdown, yang akan diupload ke Cloud Storage untuk ditinjau dan dievaluasi. Laporan komprehensif ini berfungsi sebagai referensi berharga bagi Cymbal Direct, sehingga mereka dapat membuat keputusan yang tepat dan mengoptimalkan strategi mereka berdasarkan pemahaman menyeluruh tentang persepsi pelanggan dan tren pasar.

1. Di notebook, di bagian Task 5. Synthesize multimodal insights: Generate a comprehensive report, di bagian 3. Construct the prompt for Gemini, isi TODOs untuk membuat perintah guna menginstruksikan model Gemini untuk membuat laporan yang komprehensif berdasarkan hasil analisis gabungan.

2. Di bagian 4. Send the prompt to Gemini, isi TODOs untuk mengirim perintah ke model Gemini.

Klik Check my progress untuk memverifikasi tujuan. Menyintesis insight multimodal: membuat laporan yang komprehensif.

Selamat!

Selamat! Di lab ini, Anda telah berhasil memanfaatkan model untuk menganalisis data multimodal, termasuk teks, gambar, dan audio, guna mendapatkan insight yang berharga untuk lini pakaian olahraga baru Cymbal Direct. Anda telah menunjukkan kemahiran dalam menyusun perintah yang efektif, memanfaatkan anggaran penalaran, serta membuat laporan komprehensif dengan rekomendasi yang dapat ditindaklanjuti.

Langkah berikutnya/pelajari lebih lanjut

Baca referensi berikut untuk mempelajari Gemini lebih lanjut:

• Ringkasan Gemini
• Dokumentasi AI generatif di Vertex AI
• AI Generatif di YouTube
• Jelajahi Cookbook Vertex AI untuk melihat galeri notebook AI Generatif pilihan yang dapat Anda telusuri.
• Jelajahi notebook dan sampel lainnya di repositori AI Generatif Google Cloud.

Sertifikasi dan pelatihan Google Cloud

...membantu Anda mengoptimalkan teknologi Google Cloud. Kelas kami mencakup keterampilan teknis dan praktik terbaik untuk membantu Anda memahami dengan cepat dan melanjutkan proses pembelajaran. Kami menawarkan pelatihan tingkat dasar hingga lanjutan dengan opsi on demand, live, dan virtual untuk menyesuaikan dengan jadwal Anda yang sibuk. Sertifikasi membantu Anda memvalidasi dan membuktikan keterampilan serta keahlian Anda dalam teknologi Google Cloud.

Manual Terakhir Diperbarui pada 27 Oktober 2025

Lab Terakhir Diuji pada 27 Oktober 2025

Hak cipta 2026 Google LLC. Semua hak dilindungi undang-undang. Google dan logo Google adalah merek dagang dari Google LLC. Semua nama perusahaan dan produk lain mungkin adalah merek dagang masing-masing perusahaan yang bersangkutan.