Opiniones sobre Usa Serverless for Apache Spark para cargar archivos en una tabla de BigQuery

Juan C. · Se revisó hace más de 1 año

The below instruction could have been in little more detail. As I found dataproc identification tool not visible. Next, you're going to set a few environment variables into VM instance terminal and execute a Spark template to load data into BigQuery. Set the following environment variables for the Dataproc Serverless environment.

Sameer S. · Se revisó hace más de 1 año

sandeep s. · Se revisó hace más de 1 año

Jason M. · Se revisó hace más de 1 año

error when submitting spark job ERROR: (gcloud.beta.dataproc.batches.submit.pyspark) Batch job is FAILED. Detail: Insufficient 'CPUS' quota. Requested 12.0, available 11.0. Your resource request exceeds your available quota. See https://cloud.google.com/compute/resource-usage. Use https://cloud.google.com/docs/quotas/view-manage#requesting_higher_quota to request additional quota. Running auto diagnostics on the batch. It may take few minutes before diagnostics output is available. Please check diagnostics output by running 'gcloud dataproc batches describe' command.

max s. · Se revisó hace más de 1 año

trevor a. · Se revisó hace más de 1 año

Murilo S. · Se revisó hace más de 1 año

Sergiu D. · Se revisó hace más de 1 año

Thanks Google

Wisdom K. · Se revisó hace más de 1 año

Task 3.2 fails as the spark job needs additional IAM permissions to run the script. After adding the required permission the script passed without any issues. Lab needs to be updated with this additional step.

Vamshi K. · Se revisó hace más de 1 año

Kirit C. · Se revisó hace más de 1 año

there are some errors - just re-try after 2-3 mins

Tomasz M. · Se revisó hace más de 1 año

Maitreyee R. · Se revisó hace más de 1 año

Dawid G. · Se revisó hace más de 1 año

Dmitry P. · Se revisó hace más de 1 año

Task 3 check didn't work, but I was able to see the data in Task 4. Seems like something wrong with the check in Task 3.

Nick F. · Se revisó hace más de 1 año

rida l. · Se revisó hace más de 1 año

Priyambada S. · Se revisó hace más de 1 año

Creative P. · Se revisó hace más de 1 año

abdelhay h. · Se revisó hace más de 1 año

Ujjal P. · Se revisó hace más de 1 año

Raj V. · Se revisó hace más de 1 año

Babita K. · Se revisó hace más de 1 año

MUY LENTO EL PASO DE SPARK

FABRICIO JOCABED V. · Se revisó hace más de 1 año

Hayato S. · Se revisó hace más de 1 año