Enable the Agent Platform API

Check my progress

/ 20

Extract the content of the image

Check my progress

/ 20

Extract the content of the video

Check my progress

/ 20

Create prompts with text

Check my progress

/ 40

This lab may incorporate AI tools to support your learning.

GSP1252

Google Cloud 自學實驗室

免責事項:這堂課程中的資訊僅供教學之用,不代表 Google 核准將生成式 AI 服務用於任何診斷或治療用途,或是直接用於照護病患。

總覽

Agent Platform 是功能強大的機器學習平台,可以藉助預測式生成式 AI 功能強化醫療應用程式。Agent Studio 提供符合直覺的介面,讓醫療照護從業人員和研究人員輕鬆測試及自訂生成式 AI 模型,即便沒有豐富的機器學習專業知識也沒問題。這個容易使用的平台提供多項工具和資源,包括以 UI 為基礎的互動功能和程式碼範例,讓您輕鬆將強大的生成式 AI 融入醫療照護應用程式。

在這個實作實驗室,您會深入瞭解 Agent Studio,探索多模態版 Gemini 等頂尖生成式 AI 模型的功能。您會在 Gemini 運用提示詞設計技巧來進行測試,製作文字摘要、回答問題及分類情緒。所有操作都能直接在 Google Cloud 控制台完成,不需要複雜的 API 或 Python SDK,因此無論專業醫護人員的技術專業知識程度為何,都能輕鬆使用。

目標

這個實驗室的內容包括:

  • 運用 Gemini 分析圖像
  • 運用 Gemini 分析影片
  • 設計文字提示詞,測試零樣本、單樣本和少量樣本提示做法
注意事項:請勿在這個教學實驗室輸入個人識別資訊 (PII),包括個人姓名、地址、電話號碼、電子郵件地址、身分證字號、出生日期、駕照號碼、財務資訊和病歷,以及生物辨識資料、相片和網際網路通訊協定 (IP) 位址。

設定和需求

瞭解以下事項後,再點選「Start Lab」按鈕

請詳閱以下操作說明。實驗室活動會計時,且中途無法暫停。點選「Start Lab」後就會開始計時,顯示可使用 Google Cloud 資源的時間。

您將在真正的雲端環境完成實作實驗室活動,而不是模擬或示範環境。為此,我們會提供新的暫時憑證,供您在實驗室活動期間登入及存取 Google Cloud。

為了順利完成這個實驗室,請先確認:

  • 可以使用標準的網際網路瀏覽器 (Chrome 瀏覽器為佳)。
注意事項:請使用無痕模式 (建議選項) 或私密瀏覽視窗執行此實驗室,這可以防止個人帳戶和學員帳戶之間的衝突,避免個人帳戶產生額外費用。
  • 是時候完成實驗室活動了!別忘了,活動一旦開始將無法暫停。
注意事項:務必使用實驗室專用的學員帳戶。如果使用其他 Google Cloud 帳戶,可能會產生額外費用。

如何開始研究室及登入 Google Cloud 控制台

  1. 點選「Start Lab」按鈕。如果實驗室會產生費用,畫面上會出現選擇付款方式的對話方塊。左側的「Lab Details」窗格會顯示下列項目:

    • 「Open Google Cloud console」按鈕
    • 剩餘時間
    • 必須在這個研究室中使用的臨時憑證
    • 完成這個實驗室所需的其他資訊 (如有)
  2. 點選「Open Google Cloud console」;如果使用 Chrome 瀏覽器,也能按一下滑鼠右鍵,選取「在無痕視窗中開啟連結」

    接著,實驗室會啟動相關資源,並開啟另一個分頁,顯示「登入」頁面。

    提示:您可以在不同的視窗中並排開啟分頁。

    注意:如果頁面中顯示「選擇帳戶」對話方塊,請點選「使用其他帳戶」
  3. 如有必要,請將下方的 Username 貼到「登入」對話方塊。

    {{{user_0.username | "Username"}}}

    您也可以在「Lab Details」窗格找到 Username。

  4. 點選「下一步」

  5. 複製下方的 Password,並貼到「歡迎使用」對話方塊。

    {{{user_0.password | "Password"}}}

    您也可以在「Lab Details」窗格找到 Password。

  6. 點選「下一步」

    重要事項:請務必使用實驗室提供的憑證,而非自己的 Google Cloud 帳戶憑證。 注意:如果使用自己的 Google Cloud 帳戶來進行這個實驗室,可能會產生額外費用。
  7. 按過後續的所有頁面:

    • 接受條款及細則。
    • 由於這是臨時帳戶,請勿新增救援選項或雙重驗證機制。
    • 請勿申請免費試用。

Google Cloud 控制台稍後會在這個分頁開啟。

注意:如要使用 Google Cloud 產品和服務,請點選「導覽選單」,或在「搜尋」欄位輸入服務或產品名稱。「導覽選單」圖示和搜尋欄位

工作 1:運用 Gemini 分析圖像

在這個部分,您會運用 Gemini 分析圖像。您會設計提示詞,從圖像中擷取資訊,並觀察模型的回覆。

啟用 Agent Platform API

  1. 在 Google Cloud 控制台頂端的搜尋列中輸入 Agent Platform API

  2. 點選「Marketplace 與 API」下方的 Agent Platform API 搜尋結果。

  3. 按一下「啟用」

啟用 Agent Platform API

點選「Check my progress」,確認目標已達成。

啟用 Agent Platform API。

運用 Gemini 分析圖像

  1. 前往 Google Cloud 控制台,依序點選導覽選單 (導覽選單) >「Agent Platform」>「Agent Studio」>「+ 新增」,然後選取「對話」

Agent Studio 總覽頁面

UI 分為三大主要區塊:

  • 「系統指令」(位於最上方):模型會先處理這組指令,再處理提示詞。設定系統指令後,就會套用至整個要求。只要在提示詞中包含指令,就能用於多位使用者和模型的對話回合。建議您使用系統指令來調整模型行為,告訴模型應如何回應提示詞。
  • 「設定」(位於右側):您可以在這裡選取模型 (包含第三方模型)、設定參數、使用工具 (例如建立基準),以及設定進階選項。
  • 「提示詞」(位於底部):您可以在這裡建立使用多模態功能的提示詞。 Agent Studio
  1. 點選右上方的「未命名的提示詞」,將其更名為「醫療圖像分析」

  2. 在右側的「設定」部分,確認已選取模型 。您可以視情況調整模型,或是瀏覽其他可用的模型。

  3. 下載範例圖像。對胸部 X 光片按一下滑鼠右鍵,然後儲存至電腦。

胸部 X 光片

  1. 在「提示詞」部分的左下方,依序點選「Insert Media」>「上傳」按鈕,上傳剛剛下載的 X 光片。媒體可以是圖像、影片、文字或音訊檔案。

將媒體插入 Agent Studio

  1. 圖像會顯示於「提示詞」部分。請複製下列文字並貼到圖像下方,然後點選「提示詞」部分右下方的「提交」按鈕。
為圖像命名。 注意事項:如果出現「429 配額已用完」錯誤,請一分鐘後再重新執行提示詞。

如要更明確,可以使用下列提示詞:

以 4 個字為圖像命名。

標題和預期的一樣嗎?請試著修改提示,看看結果是否不同。

  1. 說明圖像。將之前的提示換成下列文字,然後點選「SUBMIT」(提交)
Describe the image in detail.
  1. 調整參數。從左 (0) 至右 (2) 移動「設定」部分的溫度參數 (temperature),進行調整。重新提交提示,與先前結果相比,觀察結果是否有任何變化。
注意事項:溫度參數會決定選取詞元時的隨機程度。如果希望提示詞生成正確或適當的回覆,建議使用較低的溫度參數。如果溫度參數較高,則有可能生成較多樣化、預料之外或可能有偏誤的結果。如果溫度參數為 0,一律會選取可能性最高的詞元。
  1. 從圖像中擷取資訊,將先前的提示詞替換為:
這張圖像可能代表什麼情況?

接著,如要以清單的格式呈現輸出內容,請將先前的提示詞替換為:

這張圖像可能代表什麼情況?請以清單的格式呈現輸出內容,按照可能性由高到低排序。

換您上場,請試試不同的提示詞,觀察結果與先前有何差異。

結果是否符合預期?強烈建議對不同的工作試試別的提示詞,您也可以使用不同的溫度參數設定進行測試,觀察結果有何變化。

  1. 提示詞設計完畢之後,請點選「設定」部分右上方的「儲存」標誌來儲存提示詞。從下拉式選單中選取「」這個區域,然後點選「儲存」確定操作。

  2. 如要找出已儲存的提示詞,請前往左側選單的最近項目下方來查看所有項目,然後選取所需的提示詞

注意事項:選取「儲存」之後,請先稍候幾秒鐘,等待提示詞妥善儲存,再執行實驗室的後續步驟。如果顯示「無法更新記錄」提示,請點選「再試一次」。

點選「Check my progress」,確認目標已達成。

擷取圖像內容。

工作 2:運用 Gemini 分析影片

除了圖像文字之外,您也可以在多模態版 Gemini 輸入影片並輸出文字。如要取得影片,請點選肺部動畫影片的連結,將影片儲存至電腦,並上傳至 Agent Studio。

  1. 點選這個肺部動畫影片連結,影片應會顯示於網路瀏覽器。對影片按一下滑鼠右鍵,儲存至電腦。
  1. 返回 Agent Studio > 點選「+ 新增」,然後選取「對話」

  2. 點選「未命名的提示詞」,將其更名為「醫療影片分析」

  3. 在「設定」部分,確認已選取模型

  4. 依序點選「Insert Media」>「上傳」。選取您下載的肺部動畫影片,然後點選「開啟」

  5. 插入自己的提示詞,生成影片資訊。舉例來說,如要詳細說明影片,請將下列內容複製到「提示詞」部分,然後點選「提交」按鈕。

詳細說明這部影片。
  1. 提示詞設計完畢之後,請點選「設定」部分的「儲存」來儲存提示詞。從下拉式選單中選取「」這個區域,然後點選「儲存」確定操作。

注意事項:如果提示詞已自動儲存,請確認名稱正確無誤,並顯示於「提示詞管理」頁面。

多模態版 Gemini 提供多項功能,例如為複雜圖像編寫簡單說明、分析影片,以及生成多媒體視覺輔助教材。如要進一步瞭解如何設計多模態提示詞,請按這裡

點選「Check my progress」,確認目標已達成。

擷取影片內容。

工作 3:設計文字提示

在這個部分,您會瞭解如何在 Agent Studio 設計文字提示詞,包括探索零樣本、單樣本和少量樣本提示做法,以及生成文字摘要、回答問題及分類文字。

提示詞設計

您可以視需求輸入文字,例如向模型提問,模型就會根據提示詞結構回覆。找出及設計最適當的輸入文字 (提示詞),讓模型提供所需的回覆,這個過程稱為提示詞設計

提示詞設計方法

設計提示詞的方法主要有三種:

  • 零樣本提示:僅給予 LLM 工作說明的提示詞,而不提供其他資料。舉例來說,如果要 LLM 回答問題,就直接輸入「什麼是提示詞設計?」這樣的提示詞。
  • 單樣本提示:針對要求 LLM 執行的工作給予一個工作樣本。舉例來說,如果要 LLM 寫詩,您可以先提供一段詩詞樣本。
  • 少量樣本提示:針對要求 LLM 執行的工作給予少量工作範例。舉例來說,如果您希望 LLM 編寫新聞報導,可以先提供幾篇報導。

參數

您可以調整「溫度參數」和「詞元限制」這兩項重要參數,改變模型的回覆。

  • 溫度參數會決定選取詞元時的隨機程度。如果希望生成正確或適當的回覆,建議調低溫度參數。如果溫度參數為 0,模型一律會選取可能性最高的詞元。如果溫度參數較高,可能會生成多樣化、預料之外或可能有偏誤的結果。 模型的溫度參數範圍為 0 到 2,預設值為 1。
  • 輸出詞元限制會決定個別提示詞的輸出文字數量上限,一個詞元約為四個字元。

零樣本提示

  1. 返回 Agent Studio > 點選「+ 新增」,然後選取「對話」

  2. 點選「未命名的提示詞」,將其更名為「醫療狀況分析」

  3. 在「設定」部分,確認已選取模型

注意事項:新模型發布時,模型名稱和版本可能會變更。
  1. 將下列內容複製到提示詞輸入欄位:
生成常見醫療狀況清單。
  1. 點選「提交」按鈕。

  2. 將下列內容複製到提示詞輸入欄位。

說明第 1 型糖尿病的底層機轉。
  1. 點選「提交」按鈕。

模型會透過回覆詳細說明第 1 型糖尿病的底層機轉。

  1. 接著,請將下列內容複製到提示詞輸入欄位:
說明腳踝扭傷的常見治療方法。
  1. 點選「提交」按鈕。

模型會透過回覆列出腳踝扭傷的常見治療方法。

單樣本提示

採用單樣本提示做法時,您會向模型提供一個樣本來生成回覆。

  1. 點選工具列中「共用」圖示旁的三點圖示選單 (),然後選取「刪除」來清除提示詞。

  2. 返回 Agent Studio > 點選「+ 新增」,然後選取「對話」

  3. 點選「未命名的提示詞」,將其更名為「醫療樣本提示詞」

  4. 在「設定」部分,確認已選取模型

  5. 在「提示詞」部分,點選「新增樣本」按鈕。

新增樣本

  1. 在「樣本」視窗,將下列內容複製到「輸入內容」欄位
關節炎
  1. 將下列內容新增至「輸出內容」欄位:
關節腫脹痠痛時
  1. 點選「新增樣本」按鈕。

  2. 新增樣本之後,您應該會看見兩個需要填寫的部分:「輸入內容」和「提示詞」。除了提示詞之外,您還需要輸入另一個樣本才能提交。

  3. 在「輸入內容」欄位輸入下列內容:

糖尿病
  1. 在「提示詞」欄位輸入下列內容:
生成醫療狀況的說明,請使用 6 年級學生可以理解的簡單詞彙。
  1. 點選「提交」按鈕。

模型會透過回覆,以 6 年級學生可以理解的簡單詞彙說明糖尿病。

少量樣本提示

這次請新增幾個樣本,讓模型輸出內容時可以參考。

  1. 點選「編輯」按鈕,然後點選「樣本」視窗,新增下列樣本,前一個部分的既有關節炎樣本保留不變。
輸入內容 輸出內容
氣喘 氣道緊縮,導致呼吸困難
濕疹 皮膚乾燥、發癢及發紅
  1. 在「輸入內容」欄位輸入下列內容:
癌症
  1. 在「提示詞」方塊,將提示詞修改為:
生成醫療狀況的說明,請使用 6 年級學生可以理解的簡單詞彙,並以表格呈現。
  1. 完成之後,請點選「新增樣本」按鈕。

  2. 點選「提交」按鈕。

您已成功改變模型的回覆方式。現在起,模型會以 6 年級學生可以理解的簡單詞彙說明癌症,並以表格呈現。

文字摘要

在下一個練習,您會使用模型以一句話總結一整段文字。

  1. 點選工具列中「共用」圖示旁的三點圖示選單 (),然後選取「刪除」來清除提示詞。

移除樣本

  1. 返回 Agent Studio > 點選「+ 新增」,然後選取「對話」

  2. 點選「未命名的提示詞」,將其更名為「文字摘要」

  3. 在「設定」部分,確認已選取模型

  4. 將下列文字段落複製到「提示詞」欄位:

請以一句話說明這段文字: 抗生素是一種治療細菌感染的藥物,其機轉為殺死細菌或阻止細菌繁殖,讓身體的免疫系統對抗感染。抗生素通常為口服,劑型為藥丸、膠囊或藥水,有時會從靜脈注射。抗生素對病毒感染無效,不當使用可能會產生抗藥性。
  1. 點選「提交」按鈕。

模型會針對問題回答,您收到的回覆內容可能不同:

抗生素是一種藥物,可以殺死細菌或阻止細菌生長,藉此對抗細菌感染,讓身體的免疫系統消除感染。

問題回答

  1. 在「提示詞」欄位輸入下列內容:
請依據下列脈絡資料回答問題,盡量簡明扼要。如果不確定答案,請回覆「不確定答案」。 脈絡資料:1847 年,維也納的醫生 Ignaz Semmelweis 發現兩間婦產科診所的死亡率有顯著差異。他觀察到其中一間診所的醫生經常在驗屍之後,直接去為產婦接生。Semmelweis 懷疑是驗屍時的「屍體微粒」透過醫生的手傳染給產婦,引發產褥熱。因此,Semmelweis 引進了手部清潔守則,要求醫護人員在接觸病患前使用氯化石灰溶液洗手。這個做法降低了受影響診所的死亡率。 問題:洗手時使用的溶液為何?
  1. 點選「提交」按鈕。

模型會針對問題回答,您收到的回覆內容可能不同:

氯化石灰溶液。

分類文字

  1. 在「提示詞」欄位輸入下列內容:
將文字內容分類為中立、負面或正面。 文字:我覺得醫院員工還可以。
  1. 點選「提交」按鈕。

模型會針對問題回答,您收到的回覆內容可能不同:

中立。「我覺得醫院員工還可以」並未明確傳達正面或負面的情緒。這樣的說法相當中立,代表說話者對醫院員工的看法沒有特別好,也沒有特別差。
  1. 點選「設定」部分的「儲存」來儲存提示詞。從下拉式選單中選取「」這個區域,然後點選「儲存」確定操作。

注意事項:如果提示詞已自動儲存,請確認名稱正確無誤,並顯示於「提示詞管理」頁面。

儲存的提示詞會顯示於「提示詞管理」部分。

點選「Check my progress」,確認目標已達成。

使用文字建立提示詞

恭喜!

恭喜!在這個實驗室,您認識了 Agent Studio (醫療照護產業) 的功能,包括運用多模態版 Gemini 分析圖像和影片、設計文字提示詞,並瞭解了零樣本、單樣本和少量樣本提示做法,以及如何生成文字摘要、回答問題及分類文字。您已有能力運用強大的生成式 AI 模型。

Google Cloud 教育訓練與認證

協助您瞭解如何充分運用 Google Cloud 的技術。我們的課程會介紹專業技能和最佳做法,讓您可以快速掌握要領並持續進修。我們提供從基本到進階等級的訓練課程,並有隨選、線上和虛擬課程等選項,方便您抽空參加。認證可協助您驗證及證明自己在 Google Cloud 技術方面的技能和專業知識。

使用手冊上次更新日期:2026 年 2 月 13 日

實驗室上次測試日期:2026 年 2 月 13 日

Copyright 2026 Google LLC 保留所有權利。Google 和 Google 標誌是 Google LLC 的商標,其他公司和產品名稱則有可能是其關聯公司的商標。

Before you begin

  1. Labs create a Google Cloud project and resources for a fixed time
  2. Labs have a time limit and no pause feature. If you end the lab, you'll have to restart from the beginning.
  3. On the top left of your screen, click Start lab to begin

Use private browsing

  1. Copy the provided Username and Password for the lab
  2. Click Open console in private mode

Sign in to the Console

  1. Sign in using your lab credentials. Using other credentials might cause errors or incur charges.
  2. Accept the terms, and skip the recovery resource page
  3. Don't click End lab unless you've finished the lab or want to restart it, as it will clear your work and remove the project

This content is not currently available

We will notify you via email when it becomes available

Great!

We will contact you via email if it becomes available

One lab at a time

Confirm to end all existing labs and start this one

Use private browsing to run the lab

Using an Incognito or private browser window is the best way to run this lab. This prevents any conflicts between your personal account and the Student account, which may cause extra charges incurred to your personal account.

Complete this quick step to start your lab.