Create a Pub/Sub topic

Check my progress

/ 20

Create a Cloud Scheduler job

Check my progress

/ 30

Create a Cloud Storage bucket

Check my progress

/ 10

Run a Dataflow pipeline to stream data from a Pub/Sub topic to Cloud Storage

Check my progress

/ 40

This lab may incorporate AI tools to support your learning.

ARC110

Google Cloud 自學實驗室

總覽

在挑戰研究室中,您會在特定情境下完成一系列任務。挑戰研究室不會提供逐步說明,您將運用從課程研究室學到的技巧,自行找出方法完成任務!自動評分系統 (如本頁所示) 將根據您是否正確完成任務來提供意見回饋。

在您完成任務的期間,挑戰研究室不會介紹新的 Google Cloud 概念。您須靈活運用所學技巧,例如變更預設值或詳讀並研究錯誤訊息,解決遇到的問題。

若想滿分達標,就必須在時限內成功完成所有任務!

設定

瞭解以下事項後,再點選「Start Lab」按鈕

請詳閱以下操作說明。實驗室活動會計時,且中途無法暫停。點選「Start Lab」後就會開始計時,顯示可使用 Google Cloud 資源的時間。

您將在真正的雲端環境完成實作實驗室活動,而不是模擬或示範環境。為此,我們會提供新的暫時憑證,供您在實驗室活動期間登入及存取 Google Cloud。

為了順利完成這個實驗室,請先確認:

  • 可以使用標準的網際網路瀏覽器 (Chrome 瀏覽器為佳)。
注意事項:請使用無痕模式 (建議選項) 或私密瀏覽視窗執行此實驗室,這可以防止個人帳戶和學員帳戶之間的衝突,避免個人帳戶產生額外費用。
  • 是時候完成實驗室活動了!別忘了,活動一旦開始將無法暫停。
注意事項:務必使用實驗室專用的學員帳戶。如果使用其他 Google Cloud 帳戶,可能會產生額外費用。

挑戰情境

您剛獲聘,現在是初階資料工程師,至今已使用 Pub/Sub、Dataflow 和 Cloud Storage 協助多個團隊建立及管理資料。

公司認為您具備執行這些工作所需的技能與知識。

您的挑戰

您必須協助新成立的開發團隊,完成即時訊息串流專案的一些初步工作。您要協助團隊使用 Pub/Sub 和 Dataflow,模擬將即時訊息串流至 Cloud Storage。請完成下列工作:

  • 使用指令列建立 Pub/Sub 主題。
  • 使用指令列建立 Cloud Scheduler 工作,定期將訊息發布至 Pub/Sub。
  • 使用指令列建立 Cloud Storage bucket,做為 Dataflow 工作的輸出目的地。
  • 使用指令列建立並執行 Dataflow 工作,將資料從 Pub/Sub 主題串流至 Cloud Storage bucket,然後在 Cloud Storage bucket 中檢查輸出檔案。

另請遵守下列規則:

  • 確認已成功啟用所有必要 API,例如:Knowledge Catalog。
  • 如未特別指定,所有資源均須建立於 區域。
  • 除非另有指示,否則請在 Cloud Shell 完成挑戰實驗室,而非控制台。
注意:執行 Dataflow 管道前,請務必停用再啟用 Dataflow API。

各項工作的詳細說明如下,祝您好運!

工作 1:建立 Pub/Sub 主題

  • 使用指令列建立 Pub/Sub 主題

點選「Check my progress」,確認目標已達成。 建立 Pub/Sub 主題

工作 2:建立 Cloud Scheduler 工作

  1. 使用指令列為專案建立 App Engine 應用程式。
  2. 使用指令列在這個專案建立 Cloud Scheduler 工作,每隔一分鐘將訊息發布至工作 1 的 Pub/Sub 主題。訊息內文:
  3. 使用指令列啟動排程器工作。

點選「Check my progress」,確認目標已達成。 建立 Cloud Scheduler 工作

工作 3:建立 Cloud Storage bucket

  • 使用指令列建立 Cloud Storage bucket,並將 bucket 名稱設為

點選「Check my progress」,確認目標已達成。建立 Cloud Storage bucket

工作 4:執行 Dataflow 管道,將資料從 Pub/Sub 主題串流至 Cloud Storage

  1. 使用指令列建立並執行 Dataflow 工作,將資料從 Pub/Sub 主題串流至 Cloud Storage bucket。
  • 您可以選擇使用 Java 或 Python 指令碼。GitHub 頁面提供範例程式碼:java-docs-samplespython-docs-samples
  • 使用您在工作 1 建立的 Pub/Sub 主題。
  • 使用您在工作 3 建立的 Cloud Storage bucket 做為輸出位置。
  • 根據 2 分鐘的固定時間範圍,將訊息分組。
  1. 使用指令列檢查哪些檔案已寫入 Cloud Storage。

點選「Check my progress」,確認目標已達成。 執行 Dataflow 管道,將資料從 Pub/Sub 主題串流至 Cloud Storage

恭喜!

「在 Cloud Storage 建立串流資料湖泊」徽章

取得下一枚技能徽章

這個自學實驗室是「在 Cloud Storage 建立串流資料湖泊」技能徽章的一部分。完成這個技能徽章課程即可獲得上方的徽章,表彰您的成就。您可以在履歷表和社群平台張貼徽章,並加上 #GoogleCloudBadge 公開這項成就。

Google Cloud 教育訓練與認證

協助您瞭解如何充分運用 Google Cloud 的技術。我們的課程會介紹專業技能和最佳做法,讓您可以快速掌握要領並持續進修。我們提供從基本到進階等級的訓練課程,並有隨選、線上和虛擬課程等選項,方便您抽空參加。認證可協助您驗證及證明自己在 Google Cloud 技術方面的技能和專業知識。

使用手冊上次更新日期:2023 年 9 月 20 日

實驗室上次測試日期:2023 年 9 月 20 日

Copyright 2026 Google LLC 保留所有權利。Google 和 Google 標誌是 Google LLC 的商標,其他公司和產品名稱則有可能是其關聯公司的商標。

Before you begin

  1. Labs create a Google Cloud project and resources for a fixed time
  2. Labs have a time limit and no pause feature. If you end the lab, you'll have to restart from the beginning.
  3. On the top left of your screen, click Start lab to begin

Use private browsing

  1. Copy the provided Username and Password for the lab
  2. Click Open console in private mode

Sign in to the Console

  1. Sign in using your lab credentials. Using other credentials might cause errors or incur charges.
  2. Accept the terms, and skip the recovery resource page
  3. Don't click End lab unless you've finished the lab or want to restart it, as it will clear your work and remove the project

This content is not currently available

We will notify you via email when it becomes available

Great!

We will contact you via email if it becomes available

One lab at a time

Confirm to end all existing labs and start this one

Use private browsing to run the lab

Using an Incognito or private browser window is the best way to run this lab. This prevents any conflicts between your personal account and the Student account, which may cause extra charges incurred to your personal account.

Complete this quick step to start your lab.