Opiniones sobre Procesamiento de datos sin servidores con Dataflow: cómo usar Dataflow para hacer análisis de transmisiones (Python)

Siddhartha G. · Se revisó hace casi 2 años

Nassim L. · Se revisó hace casi 2 años

Pawel M. · Se revisó hace casi 2 años

Robson P. · Se revisó hace casi 2 años

Julia S. · Se revisó hace casi 2 años

done

Abhishek G. · Se revisó hace casi 2 años

Lab needs maintenance. python environment is not virtual. Expressions run as root. This leads to problems with BASE_DIR and location of test files. Really spend too much time on setup and next to nothing on the Dataflow problem. Lousy Lab. Needs Expression: sudo apt-get update && sudo apt-get install -y python3-venv # Create and activate virtual environment python3 -m venv df-env source df-env/bin/activate Install apach beam python3 -m pip install -q --upgrade pip setuptools wheel python3 -m pip install apache-beam[gcp] May generate error when there is no user error: ERROR:apache_beam.runners.dataflow.dataflow_runner:2024-03-08T18:46:48.534Z: JOB_MESSAGE_ERROR: Workflow failed. ERROR:apache_beam.runners.dataflow.dataflow_runner:2024-03-08T18:46:58.596Z: JOB_MESSAGE_ERROR: Startup of the worker pool in zone us-central1-b failed to bring up any of the desired 1 workers. Please refer to https://cloud.google.com/dataflow/docs/guides/common-errors#worker-pool-failure for help troubleshooting. ZONE_RESOURCE_POOL_EXHAUSTED: Instance 'streaming-minute-traffic--03081045-9vxu-harness-8p62' creation failed: The zone 'projects/qwiklabs-gcp-03-4b294391afef/zones/us-central1-b' does not have enough resources available to fulfill the request. Try a different zone, or try again later. ERROR:apache_beam.runners.dataflow.dataflow_runner:2024-03-08T18:46:58.619Z: JOB_MESSAGE_ERROR: Workflow failed. ERROR:apache_beam.runners.dataflow.dataflow_runner:2024-03-08T18:47:08.518Z: JOB_MESSAGE_ERROR: Startup of the worker pool in zone us-central1-b failed to bring up any of the desired 1 workers. Please refer to https://cloud.google.com/dataflow/docs/guides/common-errors#worker-pool-failure for help troubleshooting.

Mark G. · Se revisó hace casi 2 años

DONT WORK

Valentin G. · Se revisó hace casi 2 años

Kevin R. · Se revisó hace casi 2 años

Ahmad A. · Se revisó hace casi 2 años

IYANUJESU A. · Se revisó hace casi 2 años

Giorgi J. · Se revisó hace casi 2 años

Nice

venkata seshu kumar m. · Se revisó hace casi 2 años

Wouldn't complete at the end

Isaac H. · Se revisó hace casi 2 años

Juan José R. · Se revisó hace casi 2 años

Anitha K. · Se revisó hace casi 2 años

Lab needs maintenance. python environment is not virtual. Expressions run as root. This leads to problems with BASE_DIR and location of test files. Really spend too much time on setup and next to nothing on the Dataflow problem. Lousy Lab.

Mark G. · Se revisó hace casi 2 años

Oscar S. · Se revisó hace casi 2 años

Can't execute pipeline as there doesn't see to be enough resources?!? creation failed: The zone 'projects/qwiklabs-gcp-03-e72e86c0861a/zones/us-central1-a' does not have enough resources available to fulfill the request. Try a different zone, or try again later.

Timo V. · Se revisó hace casi 2 años

Cansu A. · Se revisó hace casi 2 años

Shreyash G. · Se revisó hace casi 2 años

James F. · Se revisó hace casi 2 años

Saravanakumar M. · Se revisó hace casi 2 años

Renato A. · Se revisó hace casi 2 años

Siddhartha G. · Se revisó hace casi 2 años