Відгуки: Running Apache Spark jobs on Cloud Dataproc

Error in code Writing to qwiklabs-gcp-03-5fd0a6abd6c1 Setting default log level to "WARN". To adjust logging level use sc.setLogLevel(newLevel). For SparkR, use setLogLevel(newLevel). 22/03/26 14:32:54 INFO org.apache.spark.SparkEnv: Registering MapOutputTracker 22/03/26 14:32:54 INFO org.apache.spark.SparkEnv: Registering BlockManagerMaster 22/03/26 14:32:54 INFO org.apache.spark.SparkEnv: Registering BlockManagerMasterHeartbeat 22/03/26 14:32:54 INFO org.apache.spark.SparkEnv: Registering OutputCommitCoordinator Traceback (most recent call last): File "spark_analysis.py", line 14, in <module> ax[0].get_figure().savefig('report.png'); NameError: name 'ax' is not defined

Fadina A. · Відгук надано близько 4 років тому

Oladimeji C. · Відгук надано близько 4 років тому

Vipin U. · Відгук надано близько 4 років тому

Ömer Ç. · Відгук надано близько 4 років тому

Pradeep K. · Відгук надано близько 4 років тому

Siwatchara S. · Відгук надано близько 4 років тому

Mónica V. · Відгук надано близько 4 років тому

Mike A. · Відгук надано близько 4 років тому

Vipul D. · Відгук надано близько 4 років тому

GLADSTONE B. · Відгук надано близько 4 років тому

John G. · Відгук надано близько 4 років тому

some steps are not correct. please check

Rajalukshmi R. · Відгук надано близько 4 років тому

Abdulmajid B. · Відгук надано близько 4 років тому

JORGE A. · Відгук надано близько 4 років тому

some steps are unclear and not explained in simple terms though it could just be me unfamiliar of how things work using apache and how it translates to GCP.

DHAILE I. · Відгук надано близько 4 років тому

Henry T. · Відгук надано близько 4 років тому

Hoe Kit C. · Відгук надано близько 4 років тому

sumabhavani k. · Відгук надано близько 4 років тому

Kaveri K. · Відгук надано близько 4 років тому

Lokeswar Reddy P. · Відгук надано близько 4 років тому

yoganjaneya venkataBalasubrahmanyam p. · Відгук надано близько 4 років тому

Mukul G. · Відгук надано близько 4 років тому

The variable $PROJECT_ID didn't work in the gsutil URI. I had to manually substitute the project name into it. Running the pyspark script at the end generated an error and it wasn't clear how to find the logs to understand what had happened.

Stephen W. · Відгук надано близько 4 років тому

Shashank K. · Відгук надано близько 4 років тому

Mathankumar G. · Відгук надано близько 4 років тому