Running Apache Spark jobs on Cloud Dataproc Ulasan

Error in code Writing to qwiklabs-gcp-03-5fd0a6abd6c1 Setting default log level to "WARN". To adjust logging level use sc.setLogLevel(newLevel). For SparkR, use setLogLevel(newLevel). 22/03/26 14:32:54 INFO org.apache.spark.SparkEnv: Registering MapOutputTracker 22/03/26 14:32:54 INFO org.apache.spark.SparkEnv: Registering BlockManagerMaster 22/03/26 14:32:54 INFO org.apache.spark.SparkEnv: Registering BlockManagerMasterHeartbeat 22/03/26 14:32:54 INFO org.apache.spark.SparkEnv: Registering OutputCommitCoordinator Traceback (most recent call last): File "spark_analysis.py", line 14, in <module> ax[0].get_figure().savefig('report.png'); NameError: name 'ax' is not defined

Fadina A. · Diulas sekitar 4 tahun lalu

Oladimeji C. · Diulas sekitar 4 tahun lalu

Vipin U. · Diulas sekitar 4 tahun lalu

Ömer Ç. · Diulas sekitar 4 tahun lalu

Pradeep K. · Diulas sekitar 4 tahun lalu

Siwatchara S. · Diulas sekitar 4 tahun lalu

Mónica V. · Diulas sekitar 4 tahun lalu

Mike A. · Diulas sekitar 4 tahun lalu

Vipul D. · Diulas sekitar 4 tahun lalu

GLADSTONE B. · Diulas sekitar 4 tahun lalu

John G. · Diulas sekitar 4 tahun lalu

some steps are not correct. please check

Rajalukshmi R. · Diulas sekitar 4 tahun lalu

Abdulmajid B. · Diulas sekitar 4 tahun lalu

JORGE A. · Diulas sekitar 4 tahun lalu

some steps are unclear and not explained in simple terms though it could just be me unfamiliar of how things work using apache and how it translates to GCP.

DHAILE I. · Diulas sekitar 4 tahun lalu

Henry T. · Diulas sekitar 4 tahun lalu

Hoe Kit C. · Diulas sekitar 4 tahun lalu

sumabhavani k. · Diulas sekitar 4 tahun lalu

Kaveri K. · Diulas sekitar 4 tahun lalu

Lokeswar Reddy P. · Diulas sekitar 4 tahun lalu

yoganjaneya venkataBalasubrahmanyam p. · Diulas sekitar 4 tahun lalu

Mukul G. · Diulas sekitar 4 tahun lalu

The variable $PROJECT_ID didn't work in the gsutil URI. I had to manually substitute the project name into it. Running the pyspark script at the end generated an error and it wasn't clear how to find the logs to understand what had happened.

Stephen W. · Diulas sekitar 4 tahun lalu

Shashank K. · Diulas sekitar 4 tahun lalu

Mathankumar G. · Diulas sekitar 4 tahun lalu