Opiniones sobre Procesamiento ETL en Google Cloud a través de Dataflow y BigQuery (Python)

Edson H. · Se revisó hace más de 1 año

Barry S. · Se revisó hace más de 1 año

Grover Javier R. · Se revisó hace más de 1 año

JOIN section Workflow keeps failing. Must be a problem with command: python dataflow_python_examples/data_lake_to_mart.py \ --worker_disk_type="compute.googleapis.com/projects//zones//diskTypes/pd-ssd" \ --project=$PROJECT \ --runner=DataflowRunner \ --machine_type=e2-standard-2 \ --staging_location=gs://$PROJECT/test \ --temp_location gs://$PROJECT/test \ --save_main_session \ --region=us-east1

Barry S. · Se revisó hace más de 1 año

Aleksandra O. · Se revisó hace más de 1 año

Tulasi V. · Se revisó hace más de 1 año

Tom J. · Se revisó hace más de 1 año

Kshitija B. · Se revisó hace más de 1 año

tallapally g. · Se revisó hace más de 1 año

one of the commands is missing a default setting and fails

Chris D. · Se revisó hace más de 1 año

good lab

Adhi K. · Se revisó hace más de 1 año

尚太 神. · Se revisó hace más de 1 año

Benjamin S. · Se revisó hace más de 1 año

Ezequiel R. · Se revisó hace más de 1 año

Serhii K. · Se revisó hace más de 1 año

Shalin M. · Se revisó hace más de 1 año

christian m. · Se revisó hace más de 1 año

Christian F. · Se revisó hace más de 1 año

I have problem with the Console, when I was on the docker container with python, on the second step to run the data_trasformation.py script, I kept having this message: root@48034960a23f:/dataflow# python dataflow_python_examples/data_transformation.py --project=$PROJECT --region=us-east4 --runner=DataflowRunner --machine_type=e2-standard-2 --staging_location=gs://$PROJECT/test --temp_location gs: //$PROJECT/test --input gs://$PROJECT/data_files/head_usa_names.csv --save_main_session Traceback (most recent call last): File "dataflow_python_examples/data_transformation.py", line 166, in <module> run() File "dataflow_python_examples/data_transformation.py", line 132, in run p = beam.Pipeline(options=PipelineOptions(pipeline_args)) File "/usr/local/lib/python3.8/site-packages/apache_beam/pipeline.py", line 212, in __init__ raise ValueError( ValueError: Pipeline has validations errors: Invalid GCS path (gs:///test), given for the option: temp_location. Invalid GCS path (gs:///test), given for the option: staging_location. Invalid Project ID (). Please make sure you specified the Project ID, not project number. So i Had to start from the beggining again, and this made me unable to finish the lab on time!! What do I have to do now with my credits to redo this lab??

Almudena O. · Se revisó hace más de 1 año

Yves E. · Se revisó hace más de 1 año

Béla K. · Se revisó hace más de 1 año

Dheeraj K. · Se revisó hace más de 1 año

Aruna D. · Se revisó hace más de 1 año

Gustavo Valente N. · Se revisó hace más de 1 año

Veekshith R. · Se revisó hace más de 1 año