Exécution de tâches Apache Spark sur Cloud Dataproc avis

Wei Hao L. · Examiné il y a plus de 6 ans

You have to test the part of from pyspark.sql import SparkSession, SQLContext, Row gcs_bucket='[Your-Bucket-Name]' spark = SparkSession.builder.appName("kdd").getOrCreate() sc = spark.sparkContext data_file = "gs://"+gcs_bucket+"//kddcup.data_10_percent.gz" raw_rdd = sc.textFile(data_file).cache() raw_rdd.take(5) The bucket does not import the file with this instruction wget http://kdd.ics.uci.edu/databases/kddcup99/kddcup.data_10_percent.gz gsutil cp kddcup.data_10_percent.gz gs://$PROJECT_ID/

Adolfo C. · Examiné il y a plus de 6 ans

jupyter notebook wouldn't load. couldn't even finish the lab.

Drew G. · Examiné il y a plus de 6 ans

lu b. · Examiné il y a plus de 6 ans

Andi Baso A. · Examiné il y a plus de 6 ans

namsu H. · Examiné il y a plus de 6 ans

I've got this error File "/tmp/6b2f23a3531f46359fa41c1ae8a561b6/spark_analysis.py", line 25, in <module> bucket.blob('sparktop/report.png').upload_from_filename('report.png') File "/opt/conda/default/lib/python3.6/site-packages/google/cloud/storage/blob.py", line 1388, in upload_from_filename with open(filename, "rb") as file_obj: FileNotFoundError: [Errno 2] No such file or directory: 'report.png'

Omar G. · Examiné il y a plus de 6 ans

José C. · Examiné il y a plus de 6 ans

Aaron D. · Examiné il y a plus de 6 ans

nice

Eureka_T E. · Examiné il y a plus de 6 ans

Phemelo S. · Examiné il y a plus de 6 ans

Md Rashid R. · Examiné il y a plus de 6 ans

suhail k. · Examiné il y a plus de 6 ans

Error in matplotlib trying to save png file prevented last couple of steps.

Keith W. · Examiné il y a plus de 6 ans

Jagadish Y. · Examiné il y a plus de 6 ans

SHARON C. · Examiné il y a plus de 6 ans

Jose Luis d. · Examiné il y a plus de 6 ans

Enrico d. · Examiné il y a plus de 6 ans

Kaloyan T. · Examiné il y a plus de 6 ans

Need more time to understand better or to explore what's happening on the backend

deepa m. · Examiné il y a plus de 6 ans

Aleksandar G. · Examiné il y a plus de 6 ans

Moisés C. · Examiné il y a plus de 6 ans

alex d. · Examiné il y a plus de 6 ans

Julio M. · Examiné il y a plus de 6 ans