Відгуки: Use Serverless for Apache Spark to Load BigQuery

Muhammad K. · Відгук надано більше 1 року тому

kannan v. · Відгук надано більше 1 року тому

Juveriya N. · Відгук надано більше 1 року тому

Ulu Kagan B. · Відгук надано більше 1 року тому

Bikramjit S. · Відгук надано більше 1 року тому

Tomi A. · Відгук надано більше 1 року тому

Angel T. · Відгук надано більше 1 року тому

srikanth b. · Відгук надано більше 1 року тому

Rim M. · Відгук надано більше 1 року тому

麗奈 谷. · Відгук надано більше 1 року тому

Thank you so much!

J JESUS G. · Відгук надано більше 1 року тому

Juan C. · Відгук надано більше 1 року тому

The below instruction could have been in little more detail. As I found dataproc identification tool not visible. Next, you're going to set a few environment variables into VM instance terminal and execute a Spark template to load data into BigQuery. Set the following environment variables for the Dataproc Serverless environment.

Sameer S. · Відгук надано більше 1 року тому

sandeep s. · Відгук надано більше 1 року тому

Jason M. · Відгук надано більше 1 року тому

error when submitting spark job ERROR: (gcloud.beta.dataproc.batches.submit.pyspark) Batch job is FAILED. Detail: Insufficient 'CPUS' quota. Requested 12.0, available 11.0. Your resource request exceeds your available quota. See https://cloud.google.com/compute/resource-usage. Use https://cloud.google.com/docs/quotas/view-manage#requesting_higher_quota to request additional quota. Running auto diagnostics on the batch. It may take few minutes before diagnostics output is available. Please check diagnostics output by running 'gcloud dataproc batches describe' command.

max s. · Відгук надано більше 1 року тому

trevor a. · Відгук надано більше 1 року тому

Murilo S. · Відгук надано більше 1 року тому

Sergiu D. · Відгук надано більше 1 року тому

Thanks Google

Wisdom K. · Відгук надано більше 1 року тому

Task 3.2 fails as the spark job needs additional IAM permissions to run the script. After adding the required permission the script passed without any issues. Lab needs to be updated with this additional step.

Vamshi K. · Відгук надано більше 1 року тому

Kirit C. · Відгук надано більше 1 року тому

there are some errors - just re-try after 2-3 mins

Tomasz M. · Відгук надано більше 1 року тому

Maitreyee R. · Відгук надано більше 1 року тому

Dawid G. · Відгук надано більше 1 року тому