Opiniones sobre Procesamiento de datos sin servidores con Dataflow: cómo usar Dataflow para hacer análisis de transmisiones (Python)

error and I dont know why WARNING:apache_beam.runners.dataflow.dataflow_runner:2024-08-13T10:47:22.488Z: JOB_MESSAGE_WARNING: Autoscaling is enabled for Dataflow Streaming Engine. Workers will scale between 1 and 100 unless maxNumWorkers is specified. ERROR:apache_beam.runners.dataflow.dataflow_runner:2024-08-13T10:47:25.709Z: JOB_MESSAGE_ERROR: [The preflight pipeline validation failed for job 2024-08-13_03_47_20-6672254742816284992. To bypass the validation, use the Dataflow service option with the value enable_preflight_validation=false. Learn more at https://cloud.google.com/dataflow/docs/guides/deploying-a-pipeline#validation] Missing permissions pubsub.topics.get, pubsub.topics.attachSubscription when accessing projects/qwiklabs-gcp-01-f08f0be84928/topics/my_topic as Dataflow worker service account 1068741177169-compute@developer.gserviceaccount.com. Learn more at https://cloud.google.com/dataflow/docs/guides/troubleshoot-permissions#validation-failed. ERROR:apache_beam.runners.dataflow.dataflow_runner:2024-08-13T10:47:25.741Z: JOB_MESSAGE_ERROR: Error processing pipeline. INFO:apache_beam.runners.dataflow.dataflow_runner:Job 2024-08-13_03_47_20-6672254742816284992 is in state JOB_STATE_FAILED ERROR:apache_beam.runners.dataflow.dataflow_runner:Console URL: https://console.cloud.google.com/dataflow/jobs/<RegionId>/2024-08-13_03_47_20-6672254742816284992?project=<ProjectId> Traceback (most recent call last): File "/home/jupyter/training-data-analyst/quests/dataflow_python/5_Streaming_Analytics/lab/streaming_minute_traffic_pipeline.py", line 174, in <module> run() File "/home/jupyter/training-data-analyst/quests/dataflow_python/5_Streaming_Analytics/lab/streaming_minute_traffic_pipeline.py", line 171, in run p.run().wait_until_finish() File "/opt/conda/lib/python3.10/site-packages/apache_beam/runners/dataflow/dataflow_runner.py", line 807, in wait_until_finish raise DataflowRuntimeException( apache_beam.runners.dataflow.dataflow_runner.DataflowRuntimeException: Dataflow pipeline failed. State: FAILED, Error: Error processing pipeline. (base) root@1a734f51663d:/home/jupyter/training-data-analyst/quests/dataflow_python/5_Streaming_Analytics/lab#

Philip T. · Se revisó hace alrededor de 1 año

Sergio V. · Se revisó hace alrededor de 1 año

Joaquin S. · Se revisó hace alrededor de 1 año

I do what's needed with zero errors, but when I check my progress, it's always marked as incomplete! Please fix your labs!

Khalid O. · Se revisó hace alrededor de 1 año

Abdesselem R. · Se revisó hace alrededor de 1 año

Juan Esteban D. · Se revisó hace alrededor de 1 año

Ezequiel F. · Se revisó hace alrededor de 1 año

Martin T. · Se revisó hace alrededor de 1 año

Tomasz P. · Se revisó hace alrededor de 1 año

Publicis P. · Se revisó hace alrededor de 1 año

Mateusz W. · Se revisó hace alrededor de 1 año

João Pedro Gubert d. · Se revisó hace alrededor de 1 año

Gerardo Rabindranat G. · Se revisó hace alrededor de 1 año

hector s. · Se revisó hace alrededor de 1 año

Isaac G. · Se revisó hace alrededor de 1 año

Sunil R. · Se revisó hace alrededor de 1 año

Alexis R. · Se revisó hace alrededor de 1 año

Jonathan P. · Se revisó hace alrededor de 1 año

Fredy S. · Se revisó hace alrededor de 1 año

Isaac G. · Se revisó hace alrededor de 1 año

KHAERUL L. · Se revisó hace alrededor de 1 año

Ashwin R. · Se revisó hace alrededor de 1 año

Carlos D. · Se revisó hace alrededor de 1 año

Sadibou S. · Se revisó hace alrededor de 1 año