Lab setup instructions and requirements
Protect your account and progress. Always use a private browser window and lab credentials to run this lab.

Managed Service for Apache Spark 簡介:在 Google Cloud 使用 Hadoop 和 Spark

Lab 15 minutes universal_currency_alt 1 Credit show_chart Introductory
info This lab may incorporate AI tools to support your learning.
This content is not yet optimized for mobile devices.
For the best experience, please visit us on a desktop computer using a link sent by email.

GSP123

Google Cloud 自學實驗室

總覽

Managed Service for Apache Spark 是一項代管 Spark 和 Hadoop 服務,可讓您運用開放原始碼資料工具,執行批次處理、查詢、串流和機器學習工作。透過 Managed Service for Apache Spark 的自動化功能,您可以快速建立及輕鬆管理叢集,並關閉不需要的叢集來節省費用。省下管理作業所需的時間與費用之後,您就能專心處理工作與資料。

這個實驗室改編自「使用 Google Cloud 控制台建立 Managed Service for Apache Spark 叢集」指南。

課程內容

設定和需求

瞭解以下事項後,再點選「Start Lab」按鈕

請詳閱以下操作說明。實驗室活動會計時,且中途無法暫停。點選「Start Lab」後就會開始計時,顯示可使用 Google Cloud 資源的時間。

您將在真正的雲端環境完成實作實驗室活動,而不是模擬或示範環境。為此,我們會提供新的暫時憑證,供您在實驗室活動期間登入及存取 Google Cloud。

為了順利完成這個實驗室,請先確認:

  • 可以使用標準的網際網路瀏覽器 (Chrome 瀏覽器為佳)。
注意事項:請使用無痕模式 (建議選項) 或私密瀏覽視窗執行此實驗室,這可以防止個人帳戶和學員帳戶之間的衝突,避免個人帳戶產生額外費用。
  • 是時候完成實驗室活動了!別忘了,活動一旦開始將無法暫停。
注意事項:務必使用實驗室專用的學員帳戶。如果使用其他 Google Cloud 帳戶,可能會產生額外費用。

如何開始研究室及登入 Google Cloud 控制台

  1. 點選「Start Lab」按鈕。如果實驗室會產生費用,畫面上會出現選擇付款方式的對話方塊。左側的「Lab Details」窗格會顯示下列項目:

    • 「Open Google Cloud console」按鈕
    • 剩餘時間
    • 必須在這個研究室中使用的臨時憑證
    • 完成這個實驗室所需的其他資訊 (如有)
  2. 點選「Open Google Cloud console」;如果使用 Chrome 瀏覽器,也能按一下滑鼠右鍵,選取「在無痕視窗中開啟連結」

    接著,實驗室會啟動相關資源,並開啟另一個分頁,顯示「登入」頁面。

    提示:您可以在不同的視窗中並排開啟分頁。

    注意:如果頁面中顯示「選擇帳戶」對話方塊,請點選「使用其他帳戶」
  3. 如有必要,請將下方的 Username 貼到「登入」對話方塊。

    {{{user_0.username | "Username"}}}

    您也可以在「Lab Details」窗格找到 Username。

  4. 點選「下一步」

  5. 複製下方的 Password,並貼到「歡迎使用」對話方塊。

    {{{user_0.password | "Password"}}}

    您也可以在「Lab Details」窗格找到 Password。

  6. 點選「下一步」

    重要事項:請務必使用實驗室提供的憑證,而非自己的 Google Cloud 帳戶憑證。 注意:如果使用自己的 Google Cloud 帳戶來進行這個實驗室,可能會產生額外費用。
  7. 按過後續的所有頁面:

    • 接受條款及細則。
    • 由於這是臨時帳戶,請勿新增救援選項或雙重驗證機制。
    • 請勿申請免費試用。

Google Cloud 控制台稍後會在這個分頁開啟。

注意:如要使用 Google Cloud 產品和服務,請點選「導覽選單」,或在「搜尋」欄位輸入服務或產品名稱。「導覽選單」圖示和搜尋欄位

將必要的 IAM 角色授予 Compute Engine 服務帳戶

建立叢集之前,您必須先按照下列步驟,將儲存權限指派給服務帳戶:

  1. 前往 Google Cloud 控制台,然後依序點選「導覽選單」圖示 導覽選單圖示>「IAM 與管理」>「身分與存取權管理」

  2. 點選 Compute Engine 預設服務帳戶 ([project-number]-compute@developer.gserviceaccount.com) 的「編輯主體」(鉛筆圖示)。

  3. 點選「+ 新增其他角色」

  4. 在「選取角色」部分,搜尋「Storage 管理員」,再從結果中選取該角色。

  5. 按一下「儲存」

工作 1:建立叢集

  1. 在 Google Cloud 控制台,依序點選導覽選單圖示 (導覽選單) >「查看所有產品」。在「Analytics」下方,點選「Managed Apache Spark」

展開的導覽選單,醒目顯示「Managed Apache Spark」子選單和「叢集」選項

  1. 為建立新的叢集,請依序點選「叢集」>「建立叢集」

Managed Service for Apache Spark 選單,醒目顯示「建立叢集」按鈕

  1. 設定下列參數的值,其他參數則保留預設設定:
參數
名稱
區域
可用區
依序展開「進階設定」>「基礎架構」>「主要節點」>「主要磁碟類型」 標準永久磁碟
主要節點 - 系列 E2
主要節點 - 機型
主要節點 - 主要磁碟大小 30 GB
worker 節點數 2
worker 節點 - 主要磁碟類型 標準永久磁碟
worker 節點 - 系列 E2
worker 節點 - 機型
worker 節點 - 主要磁碟大小 30 GB
依序展開「其他」>「僅限內部 IP」 取消選取「將所有執行個體設為僅具備內部 IP 位址」
  1. 點選「建立」,建立新的叢集。顯示類似下方的輸出內容時,「狀態」會從「佈建中」變為「成功」,這時即可前往下一個步驟:
注意事項:您可以忽略警告訊息「很抱歉,伺服器無法執行要求」,前往執行下一項工作。.

「叢集」頁面,顯示實驗室叢集的狀態為「運作中」

測試已完成的工作

點選「Check my progress」,確認工作已完成。

建立叢集。

工作 2:將工作提交至叢集

  1. 選取「工作」,切換至 Managed Service for Apache Spark 工作檢視畫面:

展開的 Managed Service for Apache Spark 選單,醒目顯示「工作」選項

  1. 點選「提交工作」

Managed Service for Apache Spark 頁面,醒目顯示「提交工作」按鈕

  1. 設定下列參數的值,其他參數則保留預設設定:
參數
區域
叢集
工作類型
主要類別或 jar 檔案
jar 檔案
引數
  1. 點選「提交」

您的工作應該會出現在「工作」清單,內含專案的所有工作及其叢集、類型與目前狀態。新的工作會顯示為「執行中」。狀態顯示「成功」之後,即可前往執行後續步驟。

測試已完成的工作

點選「Check my progress」,確認工作已完成。

將工作提交至叢集。
  1. 如要查看已完成工作的輸出內容,請在「工作」清單點選工作 ID:

「工作」頁面,顯示工作 11c593c3 的狀態為「成功」

  1. 如果不想捲動畫面,請將「換行」設為「啟用」

「工作輸出」頁面,醒目顯示「換行:啟用」選項

您應會看見工作已成功計算出圓周率的概略值!

工作 3:關閉叢集

  1. 您可以在「叢集」頁面關閉叢集:

Managed Service for Apache Spark 選單,醒目顯示「叢集」選項

  1. 勾選 qlab 叢集旁的核取方塊,然後點選「刪除」

「叢集」頁面,醒目顯示「刪除」按鈕

  1. 點選「確認」,確定要刪除叢集。

工作 4:隨堂測驗

下列選擇題可以加深您對本實驗室所述概念的理解,盡力回答即可。

恭喜!

您已瞭解如何建立 Managed Service for Apache Spark 叢集、提交 Spark 工作,以及關閉叢集。

後續步驟/瞭解詳情

Google Cloud 教育訓練與認證

協助您瞭解如何充分運用 Google Cloud 的技術。我們的課程會介紹專業技能和最佳做法,讓您可以快速掌握要領並持續進修。我們提供從基本到進階等級的訓練課程,並有隨選、線上和虛擬課程等選項,方便您抽空參加。認證可協助您驗證及證明自己在 Google Cloud 技術方面的技能和專業知識。

使用手冊上次更新日期:2026 年 4 月 28 日

實驗室上次測試日期:2026 年 4 月 28 日

Copyright 2026 Google LLC 保留所有權利。Google 和 Google 標誌是 Google LLC 的商標,其他公司和產品名稱則有可能是其關聯公司的商標。

Before you begin

  1. Labs create a Google Cloud project and resources for a fixed time
  2. Labs have a time limit and no pause feature. If you end the lab, you'll have to restart from the beginning.
  3. On the top left of your screen, click Start lab to begin

Use private browsing

  1. Copy the provided Username and Password for the lab
  2. Click Open console in private mode

Sign in to the Console

  1. Sign in using your lab credentials. Using other credentials might cause errors or incur charges.
  2. Accept the terms, and skip the recovery resource page
  3. Don't click End lab unless you've finished the lab or want to restart it, as it will clear your work and remove the project

This content is not currently available

We will notify you via email when it becomes available

Great!

We will contact you via email if it becomes available

One lab at a time

Confirm to end all existing labs and start this one

Use private browsing to run the lab

Using an Incognito or private browser window is the best way to run this lab. This prevents any conflicts between your personal account and the Student account, which may cause extra charges incurred to your personal account.