ラボの設定手順と要件
アカウントと進行状況を保護します。このラボを実行するには、常にシークレット ブラウジング ウィンドウとラボの認証情報を使用してください。

Cloud Storage でのストリーミング データレイクの作成: チャレンジラボ

ラボ 20分 universal_currency_alt クレジット: 1 show_chart 入門
info このラボでは、学習をサポートする AI ツールが組み込まれている場合があります。
このコンテンツはまだモバイル デバイス向けに最適化されていません。
快適にご利用いただくには、メールで送信されたリンクを使用して、デスクトップ パソコンでアクセスしてください。

ARC110

Google Cloud セルフペース ラボ

概要

チャレンジラボでは、シナリオと一連のタスクが提供されます。手順ガイドに沿って進める形式ではなく、コース内のラボで習得したスキルを駆使して、ご自身でタスクを完了していただきます。タスクが適切に完了したかどうかは、このページに表示される自動スコアリング システムで確認できます。

チャレンジラボは、Google Cloud の新しいコンセプトについて学習するためのものではありません。デフォルト値を変更する、エラー メッセージを読み調査を行ってミスを修正するなど、習得したスキルを応用する能力が求められます。

100% のスコアを達成するには、制限時間内に全タスクを完了する必要があります。

設定

[ラボを開始] ボタンをクリックする前に

こちらの説明をお読みください。ラボには時間制限があり、一時停止することはできません。タイマーは、Google Cloud のリソースを利用できる時間を示しており、[ラボを開始] をクリックするとスタートします。

このハンズオンラボでは、シミュレーションやデモ環境ではなく実際のクラウド環境を使って、ラボのアクティビティを行います。そのため、ラボの受講中に Google Cloud にログインおよびアクセスするための、新しい一時的な認証情報が提供されます。

このラボを完了するためには、下記が必要です。

  • 標準的なインターネット ブラウザ(Chrome を推奨)
注: このラボの実行には、シークレット モード(推奨)またはシークレット ブラウジング ウィンドウを使用してください。これにより、個人アカウントと受講者アカウント間の競合を防ぎ、個人アカウントに追加料金が発生しないようにすることができます。
  • ラボを完了するための時間(開始後は一時停止できません)
注: このラボでは、受講者アカウントのみを使用してください。別の Google Cloud アカウントを使用すると、そのアカウントに料金が発生する可能性があります。

チャレンジ シナリオ

あなたは、新たにジュニア データ エンジニアの職務についたところです。これまでは、Pub/Sub、Dataflow、Cloud Storage を使用してチームがデータを作成、管理するのを支援してきました。

そのため、これらのタスクのスキルや知識がすでにあると想定されています。

チャレンジ

あなたには任務が与えられています。それは、新たに結成された開発チームが取り組んでいる、ライブ メッセージ ストリーミング プロジェクトの初期の作業をサポートすることです。チームから、Pub/Sub と Dataflow を使用して Cloud Storage にライブ メッセージをストリーミングするシミュレーションの作業を支援するよう依頼されており、次のタスクを完了するよう求められています。

  • コマンドラインを使用して Pub/Sub トピックを作成する。
  • コマンドラインを使用して Cloud Scheduler ジョブを作成し、定期的に Pub/Sub にメッセージをパブリッシュする。
  • コマンドラインを使用して、Dataflow ジョブの出力先となる Cloud Storage バケットを作成する。
  • コマンドラインを使用して、Pub/Sub トピックから Cloud Storage バケットにデータをストリーミングする Dataflow ジョブを作成して実行し、Cloud Storage バケットの出力ファイルを確認する。

以下のような基準に従う必要があります。

  • 必要な API(Dataflow など)が正常に有効になっていること。
  • 特別な指示がない限り、すべてのリソースを リージョンに作成すること。
  • 特別な指示がない限り、コンソールではなく Cloud Shell でチャレンジラボを完了すること。
注: Dataflow パイプラインを実行する前に、Dataflow API を一度無効にしてから有効にしてください。

それぞれのタスクについて以下に詳しく説明します。それでは始めましょう。

タスク 1. Pub/Sub トピックを作成する

  • コマンドラインを使用して、 という Pub/Sub トピックを作成します。

[進行状況を確認] をクリックして、目標に沿って進んでいることを確認します。 Pub/Sub トピックを作成する

タスク 2. Cloud Scheduler ジョブを作成する

  1. コマンドラインを使用して、プロジェクトの App Engine アプリを作成します。
  2. コマンドラインを使用して、このプロジェクトに Cloud Scheduler ジョブを作成し、タスク 1 の Pub/Sub トピックに 1 分間隔でメッセージをパブリッシュします。メッセージ本文は「」とします。
  3. コマンドラインを使用してスケジューラ ジョブを開始します。

[進行状況を確認] をクリックして、目標に沿って進んでいることを確認します。 Cloud Scheduler ジョブを作成する

タスク 3. Cloud Storage バケットを作成する

  • コマンドラインを使用して、 というバケット名で Cloud Storage バケットを作成します。

[進行状況を確認] をクリックして、目標に沿って進んでいることを確認します。 Cloud Storage バケットを作成する

タスク 4. Dataflow パイプラインを実行して、Pub/Sub トピックから Cloud Storage にデータをストリーミングする

  1. コマンドラインを使用して、Dataflow ジョブを作成して実行し、Pub/Sub トピックから Cloud Storage バケットにデータをストリーミングします。
  • Java または Python スクリプトを使用します。サンプルコードは GitHub ページ(java-docs-samplespython-docs-samples)から入手できます。
  • タスク 1 で作成した Pub/Sub トピックを使用します。
  • タスク 3 で作成した Cloud Storage バケットを出力先として使用します。
  • 2 分の固定時間ウィンドウに基づいてメッセージをグループ化します。
  1. コマンドラインを使用して、Cloud Storage に書き出されたファイルを確認します。

[進行状況を確認] をクリックして、目標に沿って進んでいることを確認します。 Dataflow パイプラインを実行して、Pub/Sub トピックから Cloud Storage にデータをストリーミングする

お疲れさまでした

「Cloud Storage でのストリーミング データレイクの作成」バッジ

次のスキルバッジを獲得する

このセルフペース ラボは、「Cloud Storage でのストリーミング データレイクの作成」スキルバッジの一部です。このコースを完了すると成果が認められて上のようなバッジが贈られます。獲得したバッジを履歴書やソーシャル プラットフォームに記載し、#GoogleCloudBadge を使用して成果を公表しましょう。

Google Cloud トレーニングと認定資格

Google Cloud トレーニングと認定資格を通して、Google Cloud 技術を最大限に活用できるようになります。必要な技術スキルとベスト プラクティスについて取り扱うクラスでは、学習を継続的に進めることができます。トレーニングは基礎レベルから上級レベルまであり、オンデマンド、ライブ、バーチャル参加など、多忙なスケジュールにも対応できるオプションが用意されています。認定資格を取得することで、Google Cloud テクノロジーに関するスキルと知識を証明できます。

マニュアルの最終更新日: 2023 年 9 月 20 日

ラボの最終テスト日: 2023 年 9 月 20 日

Copyright 2026 Google LLC. All rights reserved. Google および Google のロゴは Google LLC の商標です。その他すべての企業名および商品名はそれぞれ各社の商標または登録商標です。

Sorry, Machine Learning with Spark on Google Cloud Dataproc is currently unavailable.

close

始める前に

  1. ラボでは、Google Cloud プロジェクトとリソースを一定の時間利用します
  2. ラボには時間制限があり、一時停止機能はありません。ラボを終了した場合は、最初からやり直す必要があります。
  3. 画面左上の [ラボを開始] をクリックして開始します

シークレット ブラウジングを使用する

  1. ラボで使用するユーザー名パスワードをコピーします
  2. プライベート モードで [コンソールを開く] をクリックします

コンソールにログインする

    ラボの認証情報を使用して
  1. ログインします。他の認証情報を使用すると、エラーが発生したり、料金が発生したりする可能性があります。
  2. 利用規約に同意し、再設定用のリソースページをスキップします
  3. ラボを終了する場合や最初からやり直す場合を除き、[ラボを終了] はクリックしないでください。クリックすると、作業内容がクリアされ、プロジェクトが削除されます

このコンテンツは現在ご利用いただけません

利用可能になりましたら、メールでお知らせいたします

ありがとうございます。

利用可能になりましたら、メールでご連絡いたします

1 回に 1 つのラボ

既存のラボをすべて終了して、このラボを開始することを確認してください

シークレット ブラウジングを使用してラボを実行する

このラボを実行するには、シークレット モードまたはシークレット ブラウジング ウィンドウを使用することをおすすめします。これにより、個人アカウントと受講者アカウントの競合を防ぎ、個人アカウントに追加料金が発生することを防ぎます。