Running Apache Spark jobs on Cloud Dataproc avis

Error in code Writing to qwiklabs-gcp-03-5fd0a6abd6c1 Setting default log level to "WARN". To adjust logging level use sc.setLogLevel(newLevel). For SparkR, use setLogLevel(newLevel). 22/03/26 14:32:54 INFO org.apache.spark.SparkEnv: Registering MapOutputTracker 22/03/26 14:32:54 INFO org.apache.spark.SparkEnv: Registering BlockManagerMaster 22/03/26 14:32:54 INFO org.apache.spark.SparkEnv: Registering BlockManagerMasterHeartbeat 22/03/26 14:32:54 INFO org.apache.spark.SparkEnv: Registering OutputCommitCoordinator Traceback (most recent call last): File "spark_analysis.py", line 14, in <module> ax[0].get_figure().savefig('report.png'); NameError: name 'ax' is not defined

Fadina A. · Examiné il y a environ 4 ans

Oladimeji C. · Examiné il y a environ 4 ans

Vipin U. · Examiné il y a environ 4 ans

Ömer Ç. · Examiné il y a environ 4 ans

Pradeep K. · Examiné il y a environ 4 ans

Siwatchara S. · Examiné il y a environ 4 ans

Mónica V. · Examiné il y a environ 4 ans

Mike A. · Examiné il y a environ 4 ans

Vipul D. · Examiné il y a environ 4 ans

GLADSTONE B. · Examiné il y a environ 4 ans

John G. · Examiné il y a environ 4 ans

some steps are not correct. please check

Rajalukshmi R. · Examiné il y a environ 4 ans

Abdulmajid B. · Examiné il y a environ 4 ans

JORGE A. · Examiné il y a environ 4 ans

some steps are unclear and not explained in simple terms though it could just be me unfamiliar of how things work using apache and how it translates to GCP.

DHAILE I. · Examiné il y a environ 4 ans

Henry T. · Examiné il y a environ 4 ans

Hoe Kit C. · Examiné il y a environ 4 ans

sumabhavani k. · Examiné il y a environ 4 ans

Kaveri K. · Examiné il y a environ 4 ans

Lokeswar Reddy P. · Examiné il y a environ 4 ans

yoganjaneya venkataBalasubrahmanyam p. · Examiné il y a environ 4 ans

Mukul G. · Examiné il y a environ 4 ans

The variable $PROJECT_ID didn't work in the gsutil URI. I had to manually substitute the project name into it. Running the pyspark script at the end generated an error and it wasn't clear how to find the logs to understand what had happened.

Stephen W. · Examiné il y a environ 4 ans

Shashank K. · Examiné il y a environ 4 ans

Mathankumar G. · Examiné il y a environ 4 ans