Join Sign in

Apply your skills in Google Cloud console

Andrés Salcedo

Member since 2025

Diamond League

8587 points
Serverless Data Processing with Dataflow: Develop Pipelines Earned Apr 1, 2026 EDT
Serverless Data Processing with Dataflow: Foundations Earned Mar 23, 2026 EDT
Build Streaming Data Pipelines on Google Cloud Earned Mar 23, 2026 EDT
Build Batch Data Pipelines on Google Cloud Earned Mar 21, 2026 EDT
Build Data Lakes and Data Warehouses on Google Cloud Earned Mar 7, 2026 EST
Google Cloud 中的資料工程簡介 Earned Mar 7, 2026 EST
在 Google Cloud 為機器學習 API 準備資料 Earned Feb 27, 2026 EST
建構安全的 Google Cloud 網路 Earned Feb 27, 2026 EST
Google Cloud 運算的基本概念：Google Cloud 中的資料、機器學習和 AI Earned Feb 25, 2026 EST
Google Cloud 運算的基本概念：Google Cloud 的網路與安全性 Earned Feb 23, 2026 EST
在 Google Cloud 設定應用程式開發環境 Earned Feb 19, 2026 EST
Google Cloud 運算的基本概念：Google Cloud 基礎架構 Earned Feb 19, 2026 EST
在 Compute Engine 導入 Cloud Load Balancing Earned Sep 4, 2025 EDT
Google Cloud 運算的基本概念：Cloud 運算基礎知識 Earned Sep 2, 2025 EDT

In this second installment of the Dataflow course series, we are going to be diving deeper on developing pipelines using the Beam SDK. We start with a review of Apache Beam concepts. Next, we discuss processing streaming data using windows, watermarks and triggers. We then cover options for sources and sinks in your pipelines, schemas to express your structured data, and how to do stateful transformations using State and Timer APIs. We move onto reviewing best practices that help maximize your pipeline performance. Towards the end of the course, we introduce SQL and Dataframes to represent your business logic in Beam and how to iteratively develop pipelines using Beam notebooks.

Learn more

This course is part 1 of a 3-course series on Serverless Data Processing with Dataflow. In this first course, we start with a refresher of what Apache Beam is and its relationship with Dataflow. Next, we talk about the Apache Beam vision and the benefits of the Beam Portability framework. The Beam Portability framework achieves the vision that a developer can use their favorite programming language with their preferred execution backend. We then show you how Dataflow allows you to separate compute and storage while saving money, and how identity, access, and management tools interact with your Dataflow pipelines. Lastly, we look at how to implement the right security model for your use case on Dataflow.

Learn more

In this course you will get hands-on in order to work through real-world challenges faced when building streaming data pipelines. The primary focus is on managing continuous, unbounded data with Google Cloud products.

Learn more

In this intermediate course, you will learn to design, build, and optimize robust batch data pipelines on Google Cloud. Moving beyond fundamental data handling, you will explore large-scale data transformations and efficient workflow orchestration, essential for timely business intelligence and critical reporting. Get hands-on practice using Dataflow for Apache Beam and Serverless for Apache Spark (Dataproc Serverless) for implementation, and tackle crucial considerations for data quality, monitoring, and alerting to ensure pipeline reliability and operational excellence. A basic knowledge of data warehousing, ETL/ELT, SQL, Python, and Google Cloud concepts is recommended.

Learn more

While the traditional approaches of using data lakes and data warehouses can be effective, they have shortcomings, particularly in large enterprise environments. This course introduces the concept of a data lakehouse and the Google Cloud products used to create one. A lakehouse architecture uses open-standard data sources and combines the best features of data lakes and data warehouses, which addresses many of their shortcomings.

Learn more

在本課程中，您會學到 Google Cloud 上的資料工程、資料工程師的角色與職責，以及這些內容如何對應至 Google Cloud 提供的服務。您也將瞭解處理資料工程難題的許多方法。

Learn more

完成 在 Google Cloud 為機器學習 API 準備資料 技能徽章入門課程，即可證明您具備下列技能： 使用 Dataprep by Trifacta 清理資料、在 Dataflow 執行資料管道、在 Dataproc 建立叢集和執行 Apache Spark 工作，以及呼叫機器學習 API，包含 Cloud Natural Language API、Google Cloud Speech-to-Text API 和 Video Intelligence API。

Learn more

完成「建構安全的 Google Cloud 網路」課程，即可獲得技能徽章。本課程將說明多項網路相關 資源，協助您在 Google Cloud 建構、調度資源和保護應用程式。

Learn more

Google Cloud 運算基本概念課程，適合幾乎沒有雲端運算背景或經驗的學員。這些課程會概略介紹雲端基礎知識、大數據和機器學習的核心概念，以及 Google Cloud 的角色和定位。完成這一系列課程後，學員將能闡述這些概念並展示實用技能。學員需依序完成課程： 1. Google Cloud 運算的基本概念：Cloud 運算基礎知識 2. Google Cloud 運算的基本概念：Google Cloud 基礎架構 3. Google Cloud 運算的基本概念：Google Cloud 的網路與安全性 4. Google Cloud 運算的基本概念：Google Cloud 中的資料、機器學習和 AI 本系列的最後一堂課回顧了代管大數據服務、機器學習與這項技術的價值，以及如何獲得技能徽章，進一步展示您的 Google Cloud 技能。

Learn more

Google Cloud 運算基本概念課程，適合幾乎沒有雲端運算背景或經驗的學員。這些課程會說明雲端運算基本知識、大數據和機器學習的核心概念，以及 Google Cloud 的角色和定位。 完成這一系列課程後，學員將能夠闡述這些概念並展示實用技能。學員應依以下順序完成課程： 1. Google Cloud 運算的基本概念：Cloud 運算基礎知識 2. Google Cloud 運算的基本概念：Google Cloud 基礎架構 3. Google Cloud 運算的基本概念：Google Cloud 的網路與安全性 4. Google Cloud 運算的基本概念：Google Cloud 中的資料、機器學習和 AI 第三門課涵蓋雲端自動化和管理工具，以及建構安全網路。

Learn more

只要修完「在 Google Cloud 設定應用程式開發環境」課程，就能獲得技能徽章。 在本課程中，您將學會如何使用以下技術的基本功能，建構和連結以儲存空間為中心的雲端基礎架構：Cloud Storage、Identity and Access Management、Cloud Functions 和 Pub/Sub。

Learn more

Google Cloud 運算基本概念課程，適合幾乎沒有雲端運算背景或經驗的學員。這些課程會概略介紹雲端基礎知識、大數據和機器學習的核心概念，以及 Google Cloud 的角色和定位。完成這一系列課程後，學員將能闡述這些概念並展示實用技能。學員需依序完成課程： 1. Google Cloud 運算的基本概念：Cloud 運算基礎知識 2. Google Cloud 運算的基本概念：Google Cloud 基礎架構 3. Google Cloud 運算的基本概念：Google Cloud 的網路與安全性 4. Google Cloud 運算的基本概念：Google Cloud 中的資料、機器學習和 AI

Learn more

完成「在 Compute Engine 導入 Cloud Load Balancing」技能徽章入門課程，即可證明您具備下列技能： 在 Compute Engine 建立及部署虛擬機器， 以及設定網路和應用程式負載平衡器。

Learn more

Google Cloud 運算基本概念課程，適合幾乎沒有雲端運算背景或經驗的學員。這些課程會說明雲端運算基本知識、大數據和機器學習的核心概念，以及 Google Cloud 的角色和定位。完成這一系列課程後，學員將能夠闡述這些概念並展示實用技能。學員應依以下順序完成課程： 1. Google Cloud 運算的基本概念：Cloud 運算基礎知識 2. Google Cloud 運算的基本概念：Google Cloud 基礎架構 3. Google Cloud 運算的基本概念：Google Cloud 的網路與安全性 4. Google Cloud 運算的基本概念：Google Cloud 中的資料、機器學習和 AI 第一門課會概略說明雲端運算、Google Cloud 的使用方式，以及不同的運算選項。

Learn more