리뷰 Dataflow를 사용한 서버리스 데이터 처리 - Apache Beam 및 Dataflow를 사용한 ETL 파이프라인 작성(Python)개

There is currently an issue with google.auth library (https://github.com/googleapis/google-cloud-python/issues/16090) that prevents me from finishing the lab - took a long time to find the root couse and I run out of time. Additionally, the worker zones and machine types have to be specified because without them the dataflow cannot spawn workers and jobs keep failing.

Przemyslaw S. · 19일 전에 리뷰됨

1. There are 2 issues running the lab: - lab 1: apache_beam.io.filesystem.BeamIOError: Match operation failed with exceptions {'gs://qwiklabs-gcp-04-9d1f7241cd59/events.json': RefreshError(TransportError("Failed to retrieve https://metadata.google.internal/computeMetadata/v1/instance/service-accounts/default/?recursive=true from the Google Compute Engine metadata service. Compute Engine Metadata server unavailable. Last exception: HTTPSConnectionPool(host='metadata.google.internal', port=443): Max retries exceeded with url: /computeMetadata/v1/instance/service-accounts/default/?recursive=true (Caused by SSLError(SSLCertVerificationError(1, '[SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed: unable to get local issuer certificate - lab 2 Startup of the worker pool in us-central1 failed to bring up any of the desired 1 workers

Igor P. · 19일 전에 리뷰됨

Bartłomiej B. · 19일 전에 리뷰됨

Alice Wu 吳馨妤 E. · 22일 전에 리뷰됨

not enough recources to complete the lab

Stef v. · 22일 전에 리뷰됨

Sriyansh S. · 22일 전에 리뷰됨

Shaik S. · 22일 전에 리뷰됨

Too abstract

Anirban S. · 23일 전에 리뷰됨

EMIL-CRISTIAN C. · 24일 전에 리뷰됨

Ram krishna Reddy S. · 24일 전에 리뷰됨

Anatolii L. · 25일 전에 리뷰됨

Ram krishna Reddy S. · 25일 전에 리뷰됨

Ram krishna Reddy S. · 26일 전에 리뷰됨

Ram krishna Reddy S. · 26일 전에 리뷰됨

don't have enough resources to create pipeline

Anatolii L. · 26일 전에 리뷰됨

Ram krishna Reddy S. · 26일 전에 리뷰됨

Again, resources exhausted. THIS IS IMPOSSIBLE!!!!

Alejandro C. · 26일 전에 리뷰됨

just did not work, the workers for dataflow where not working as expected

Christian . · 26일 전에 리뷰됨

Mainak C. · 27일 전에 리뷰됨

Andra I. · 28일 전에 리뷰됨

Can't get resource for DataflowRunner

Daniel R. · 28일 전에 리뷰됨

Rasmus J. · 29일 전에 리뷰됨

BECI J. · 29일 전에 리뷰됨

Even the solution did not run

Philip H. · 29일 전에 리뷰됨

Endless problems when it come to running dataflow jobs regard the zones and workers

Hamza A. · 30일 전에 리뷰됨