Opiniones sobre Cómo ejecutar trabajos de Apache Spark en Cloud Dataproc

Wei Hao L. · Se revisó hace más de 6 años

You have to test the part of from pyspark.sql import SparkSession, SQLContext, Row gcs_bucket='[Your-Bucket-Name]' spark = SparkSession.builder.appName("kdd").getOrCreate() sc = spark.sparkContext data_file = "gs://"+gcs_bucket+"//kddcup.data_10_percent.gz" raw_rdd = sc.textFile(data_file).cache() raw_rdd.take(5) The bucket does not import the file with this instruction wget http://kdd.ics.uci.edu/databases/kddcup99/kddcup.data_10_percent.gz gsutil cp kddcup.data_10_percent.gz gs://$PROJECT_ID/

Adolfo C. · Se revisó hace más de 6 años

jupyter notebook wouldn't load. couldn't even finish the lab.

Drew G. · Se revisó hace más de 6 años

lu b. · Se revisó hace más de 6 años

Andi Baso A. · Se revisó hace más de 6 años

namsu H. · Se revisó hace más de 6 años

I've got this error File "/tmp/6b2f23a3531f46359fa41c1ae8a561b6/spark_analysis.py", line 25, in <module> bucket.blob('sparktop/report.png').upload_from_filename('report.png') File "/opt/conda/default/lib/python3.6/site-packages/google/cloud/storage/blob.py", line 1388, in upload_from_filename with open(filename, "rb") as file_obj: FileNotFoundError: [Errno 2] No such file or directory: 'report.png'

Omar G. · Se revisó hace más de 6 años

José C. · Se revisó hace más de 6 años

Aaron D. · Se revisó hace más de 6 años

nice

Eureka_T E. · Se revisó hace más de 6 años

Phemelo S. · Se revisó hace más de 6 años

Md Rashid R. · Se revisó hace más de 6 años

suhail k. · Se revisó hace más de 6 años

Error in matplotlib trying to save png file prevented last couple of steps.

Keith W. · Se revisó hace más de 6 años

Jagadish Y. · Se revisó hace más de 6 años

SHARON C. · Se revisó hace más de 6 años

Jose Luis d. · Se revisó hace más de 6 años

Enrico d. · Se revisó hace más de 6 años

Kaloyan T. · Se revisó hace más de 6 años

Need more time to understand better or to explore what's happening on the backend

deepa m. · Se revisó hace más de 6 años

Aleksandar G. · Se revisó hace más de 6 años

Moisés C. · Se revisó hace más de 6 años

alex d. · Se revisó hace más de 6 años

Julio M. · Se revisó hace más de 6 años