Відгуки: ETL Processing on Google Cloud Using Dataflow and BigQuery (Python)

Easy to understand. It was good to link the code with the visual pipeline on dataflow. Before this lab, I didn't know what runs under the hood.

Renan B. · Відгук надано більше 3 років тому

Bohdan S. · Відгук надано більше 3 років тому

Juan José A. · Відгук надано більше 3 років тому

Sergio C. · Відгук надано більше 3 років тому

David S. · Відгук надано більше 3 років тому

Andrew K. · Відгук надано більше 3 років тому

A job cmd to create the ingest data table failed due to lack of resource in us-east4 zone. spending lots of time troubleshooting, and enough time to finish the lab. I had to fix the cmd to run it in another region us-east1 to pass the step. It would be better to provide some tips if unexpected errors happens and how to workaround it. python dataflow_python_examples/data_ingestion.py \ Here is the error INFO:apache_beam.runners.dataflow.dataflow_runner:Job 2023-03-12_10_47_49-16096364461910794384 is in state JOB_STATE_RUNNING INFO:apache_beam.runners.dataflow.dataflow_runner:2023-03-12T17:48:31.918Z: JOB_MESSAGE_ERROR: Startup of the worker pool in zone us-east4-c failed to bring up any of the desired 1 workers. Please refer to https://cloud.google.com/dataflow/docs/guides/common-errors#worker-pool-failure for help troubleshooting. ZONE_RESOURCE_POOL_EXHAUSTED: Instance 'beamapp-root-0312174747-5-03121047-burs-harness-w27q' creation failed: The zone 'projects/qwiklabs-gcp-02-2513142a1690/zones/us-east4-a' does not have enough resources available to fulfill the request. Try a different zone, or try again later. INFO:apache_beam.runners.dataflow.dataflow_runner:2023-03-12T17:48:31.935Z: JOB_MESSAGE_ERROR: Workflow failed.

Steve L. · Відгук надано більше 3 років тому

Shankar Prasaad R. · Відгук надано більше 3 років тому

Vivek K. · Відгук надано більше 3 років тому

Wahyu Calvin Frans M. · Відгук надано більше 3 років тому

MADHUSUDHANA VAMSI V. · Відгук надано більше 3 років тому

Vinod K. · Відгук надано більше 3 років тому

MADHUSUDHANA VAMSI V. · Відгук надано більше 3 років тому

Tetra L. · Відгук надано більше 3 років тому

Oleksandr O. · Відгук надано більше 3 років тому

Abdullah A. · Відгук надано більше 3 років тому

Mohit A. · Відгук надано більше 3 років тому

Rawan A. · Відгук надано більше 3 років тому

Rawan A. · Відгук надано більше 3 років тому

Pawan S. · Відгук надано більше 3 років тому

Дмитрий М. · Відгук надано більше 3 років тому

This was a very well executed lab....the job state language is different in the cloud shell for the "completed" vs "done" states than it is in the write up

Matthew O. · Відгук надано більше 3 років тому

Marcell F. · Відгук надано більше 3 років тому

Dmytro L. · Відгук надано більше 3 років тому

Sergio C. · Відгук надано більше 3 років тому