Opiniones sobre Procesamiento ETL en Google Cloud a través de Dataflow y BigQuery (Python)

Sridhar E. · Se revisó hace alrededor de 7 años

The lab needs more time. There is just enough time to give a quick read of the python code files. An additional 30 min should be good. The explanation in Step5 & Step6 (see below) just repeat of that from the Step2. Adding a block diagram like in the DataFlow charts would be good. You will now build a Dataflow pipeline with a TextIO source and a BigQueryIO destination to ingest data into BigQuery. More specifically, it will: Ingest the files from GCS. Filter out the header row in the files. Convert the lines read to dictionary objects. Output the rows to BigQuery.

Sreedevi G. · Se revisó hace alrededor de 7 años

Punyanuch S. · Se revisó hace alrededor de 7 años

Andrew Z. · Se revisó hace alrededor de 7 años

Dataflow is long shutting down worker it may longer than 3 min calculate to 50% of all processes that's very inefficiency.

Thatchapoom T. · Se revisó hace alrededor de 7 años

Graciela G. · Se revisó hace alrededor de 7 años

Jorge F. · Se revisó hace alrededor de 7 años

Nicholas F. · Se revisó hace alrededor de 7 años

Dmytro R. · Se revisó hace alrededor de 7 años

Cliff L. · Se revisó hace alrededor de 7 años

atmi t. · Se revisó hace alrededor de 7 años

Murali K. · Se revisó hace alrededor de 7 años

Too slow execution of dataflow, I need more practice it seems

Salvador L. · Se revisó hace alrededor de 7 años

Too slow execution of dataflow

Salvador L. · Se revisó hace alrededor de 7 años

Good lab but too long to finish it one hour Dataflow is quite slow

Pierre G. · Se revisó hace alrededor de 7 años

Connor M. · Se revisó hace alrededor de 7 años

AASTHA A. · Se revisó hace alrededor de 7 años

Appu V. · Se revisó hace alrededor de 7 años

Pratap S. · Se revisó hace alrededor de 7 años

Alejandro G. · Se revisó hace alrededor de 7 años

Alex K. · Se revisó hace alrededor de 7 años

need more time.

Sri N. · Se revisó hace alrededor de 7 años

Masthanaiah C. · Se revisó hace alrededor de 7 años

Atul C. · Se revisó hace alrededor de 7 años

Anton Z. · Se revisó hace alrededor de 7 años