GSP103

Genel Bakış

Managed Service for Apache Spark; Apache Spark ve Apache Hadoop kümelerini daha basit ve uygun maliyetli bir şekilde çalıştırmak için geliştirilmiş, hızlı, kullanımı kolay ve tümüyle yönetilen bir bulut hizmetidir. Eskiden saatler, hatta günler süren işlemler, birkaç saniyede veya dakikalar içinde tamamlanır. Managed Service for Apache Spark kümelerini hızla oluşturup istediğiniz zaman yeniden boyutlandırabilirsiniz. Bu sayede, kümelerinize sığmayan ardışık veri düzenleri konusunda endişelenmeniz gerekmez.

Bu laboratuvarda, Managed Apache Spark kümesi oluşturmak, kümede basit bir Apache Spark işi çalıştırmak, ardından kümedeki çalışanların sayısını değiştirmek için Google Cloud konsolunun nasıl kullanılacağı anlatılmaktadır.

Yapacaklarınız

Bu laboratuvarda şunları öğreneceksiniz:

• Google Cloud konsolunda Managed Apache Spark kümesi oluşturma
• Kümede basit bir Apache Spark işi çalıştırma
• Kümedeki çalışan sayısını düzenleme

Kurulum ve şartlar

Laboratuvarı Başlat düğmesini tıklamadan önce

Buradaki talimatları okuyun. Laboratuvarlar süreli olduğundan duraklatılamaz. Start Lab'i (Laboratuvarı başlat) tıkladığınızda başlayan zamanlayıcı, Google Cloud kaynaklarının ne süreyle kullanımınıza açık durumda kalacağını gösterir.

Bu uygulamalı laboratuvarı kullanarak, laboratuvar etkinliklerini simülasyon veya demo ortamı yerine gerçek bir bulut ortamında gerçekleştirebilirsiniz. Bunu yapabilmeniz için size yeni, geçici kimlik bilgileri verilir. Bu kimlik bilgilerini laboratuvar süresince Google Cloud'da oturum açmak ve Google Cloud'a erişmek için kullanabilirsiniz.

Bu laboratuvarı tamamlamak için gerekenler:

• Standart bir internet tarayıcısına erişim (Chrome Tarayıcı önerilir)

Not: Bu laboratuvarı çalıştırmak için tarayıcıyı gizli modda (önerilen) veya gizli tarama penceresinde açın. Aksi takdirde, kişisel hesabınızla öğrenci hesabınız arasında oluşabilecek çakışmalar nedeniyle kişisel hesabınızdan ek ücret alınabilir.

• Laboratuvarı tamamlamak için yeterli süre (Laboratuvarlar başlatıldıktan sonra duraklatılamaz.)

Not: Bu laboratuvar için yalnızca öğrenci hesabını kullanın. Farklı bir Google Cloud hesabı kullanırsanız bu hesaptan ödeme alınabilir.

Laboratuvarınızı başlatma ve Google Cloud konsolunda oturum açma

1. Start Lab (Laboratuvarı Başlat) düğmesini tıklayın. Laboratuvar için ödeme yapmanız gerekiyorsa ödeme yöntemini seçebileceğiniz bir iletişim kutusu açılır. Sağdaki Lab setup and access (Laboratuvar kurulumu ve erişimi) panelinde şunlar yer alır:

   • Open Google Cloud console (Google Cloud konsolunu aç) düğmesi
   • Bu laboratuvarda kullanmanız gereken geçici kimlik bilgileri (kullanıcı adı ve şifre)
   • Bu laboratuvarda ilerlemek için gerekebilecek diğer bilgiler

   Laboratuvar zamanlayıcısının sayfanın üst kısmına yakın bir yerde bulunduğunu ve kalan süreyi gösterdiğini unutmayın.

2. Open Google Cloud console'u (Google Cloud konsolunu aç) tıklayın (veya Chrome Tarayıcı'yı kullanıyorsanız sağ tıklayıp Bağlantıyı gizli pencerede aç'ı seçin).

   Laboratuvar, kaynakları çalıştırır ve sonra "Oturum açın" sayfasını gösteren başka bir sekme açar.

   İpucu: Sekmeleri ayrı pencerelerde, yan yana açın.

   Not: Bir hesap seçin iletişim kutusunu görürseniz Başka bir hesap kullan'ı tıklayın.

3. Gerekirse aşağıdaki kullanıcı adını kopyalayıp Oturum açın iletişim kutusuna yapıştırın.

   {{{user_0.username | "Username"}}}

   Kullanıcı adını Lab setup and access (Laboratuvar kurulumu ve erişimi) panelinde de bulabilirsiniz.

4. Next'i (Sonraki) tıklayın.

5. Aşağıdaki şifreyi kopyalayıp Welcome (Hoş geldiniz) iletişim kutusuna yapıştırın.

   {{{user_0.password | "Password"}}}

   Şifreyi Lab setup and access (Laboratuvar kurulumu ve erişimi) panelinde de bulabilirsiniz.

6. Next'i (Sonraki) tıklayın.

   Önemli: Laboratuvarın sizinle paylaştığı giriş bilgilerini kullanmanız gerekir. Google Cloud hesabınızın kimlik bilgilerini kullanmayın. Not: Bu laboratuvarda kendi Google Cloud hesabınızı kullanabilmek için ek ücret ödemeniz gerekebilir.

7. Sonraki sayfalarda ilgili düğmeleri tıklayarak ilerleyin:

   • Hüküm ve koşulları kabul edin.
   • Geçici bir hesap kullandığınızdan, kurtarma seçenekleri veya iki faktörlü kimlik doğrulama eklemeyin.
   • Ücretsiz denemelere kaydolmayın.

Birkaç saniye sonra Google Cloud konsolu bu sekmede açılır.

Not: Google Cloud ürün ve hizmetlerine erişmek için gezinme menüsünü tıklayın veya Search (Arama) alanına hizmetin veya ürünün adını yazın.

Cloud Shell'i etkinleştirme

Cloud Shell, çok sayıda geliştirme aracı içeren bir sanal makinedir. 5 GB boyutunda kalıcı bir ana dizin sunar ve Google Cloud üzerinde çalışır. Cloud Shell, Google Cloud kaynaklarınıza komut satırı erişimi sağlar.

1. Google Cloud konsolunun üst kısmından Activate Cloud Shell (Cloud Shell'i etkinleştir) simgesini tıklayın.

2. Aşağıdaki pencereleri tıklayın:

   • Cloud Shell bilgi penceresinde devam edin.
   • Google Cloud API çağrıları yapmak için Cloud Shell'e kimlik bilgilerinizi kullanma yetkisi verin.

Bağlandığınızda kimliğiniz zaten doğrulanmıştır. Proje ise Project_ID'nize () göre ayarlanmıştır. Çıkış, bu oturum için Project_ID'yi tanımlayan bir satır içerir:

Your Cloud Platform project in this session is set to {{{project_0.project_id | "PROJECT_ID"}}}

gcloud, Google Cloud'un komut satırı aracıdır. Cloud Shell'e önceden yüklenmiştir ve sekmeyle tamamlamayı destekler.

3. (İsteğe bağlı) Etkin hesap adını şu komutla listeleyebilirsiniz:

gcloud auth list

4. Authorize'ı (Yetkilendir) tıklayın.

Çıkış:

ACTIVE: * ACCOUNT: {{{user_0.username | "ACCOUNT"}}} To set the active account, run: $ gcloud config set account `ACCOUNT`

5. (İsteğe bağlı) Proje kimliğini şu komutla listeleyebilirsiniz:

gcloud config list project

Çıkış:

[core] project = {{{project_0.project_id | "PROJECT_ID"}}} Not: gcloud ile ilgili tüm belgeleri, Google Cloud'daki gcloud CLI'a genel bakış rehberinde bulabilirsiniz.

Cloud Dataproc API'nin etkinleştirildiğini doğrulama

Google Cloud'da Managed Apache Spark kümesi oluşturabilmek için Cloud Dataproc API'nin etkinleştirilmiş olması gerekir. API'nin etkinleştirildiğini doğrulamak için:

1. Gezinme menüsü > APIs & Services > (API'ler ve Hizmetler) Library'yi (Kitaplık) tıklayın.

2. Search for APIs & Services (API ve Hizmet Arayın) iletişim kutusuna Cloud Dataproc API yazın. Konsoldaki arama sonuçlarında Cloud Dataproc API gösterilir.

3. API'nin durumunu görüntülemek için Cloud Dataproc API'yi tıklayın. API etkinleştirilmemişse Enable (Etkinleştir) düğmesini tıklayın.

API etkinleştirildikten sonra laboratuvar talimatlarını uygulayın.

Compute Engine hizmet hesabına gerekli IAM rolünü atama

1. Google Cloud konsolundaki gezinme menüsünde () IAM & Admin (IAM ve Yönetici) > IAM'i tıklayın.

2. Compute Engine varsayılan hizmet hesabının ([proje-numarası]-compute@developer.gserviceaccount.com) yanından Edit principal'ı (kalem simgesi) [Sorumluyu düzenle] tıklayın.

3. + Add another role'ü (Başka bir rol ekle) tıklayın.

4. Select a role (Rol seçin) bölümünde Storage Admin'i (Depolama Yöneticisi) arayın ve sonuçlardan bu rolü seçin.

5. Save'i (Kaydet) tıklayın.

1. görev: Küme oluşturma

1. Cloud Shell'de aşağıdaki komutu çalıştırarak e2-standard-2 sanal makineleri ve 30 GB standart kalıcı diskleri olan example-cluster adında bir küme oluşturun:

gcloud dataproc clusters create example-cluster \ --region={{{ project_0.default_region }}} \ --zone={{{ project_0.default_zone }}} \ --master-machine-type=e2-standard-2 \ --master-boot-disk-type=pd-standard \ --master-boot-disk-size=30GB \ --worker-machine-type=e2-standard-2 \ --worker-boot-disk-type=pd-standard \ --worker-boot-disk-size=30GB \ --num-workers=2

2. Bir alt bölgeyi onaylamanız veya Cloud Shell'i yetkilendirmeniz istenirse Y yazın veya Authorize'ı (Yetkilendir) tıklayın.

Kümenizin oluşturulması birkaç dakika sürer. Komut çıkışı, hazır olduğunda Created [... example-cluster] (Oluşturuldu [... example-cluster]) ifadesini gösterir.

Yerine getirdiğiniz görevi doğrulamak için İlerleme durumumu kontrol et'i tıklayın.

Küme oluşturma

2. görev: İş gönderme

Örnek Spark işi çalıştırmak için:

1. Google Cloud konsolunda, gezinme menüsü () > View All Products'ı (Tüm ürünleri göster) seçin, ardından Analytics (Analiz) bölümünde Managed Apache Spark > Clusters'ı (Kümeler) tıklayın.

Yeni oluşturduğunuz example-cluster kümesinin Running (Çalışıyor) durumunda listelendiğini göreceksiniz.

2. Soldaki bölmede Jobs'ı (İşler) tıklayıp Managed Apache Spark'ın işler görünümüne geçin, ardından Submit job'ı (İşi gönder) tıklayın.

3. İşi güncellemek için aşağıdaki alanları ayarlayın. Diğer tüm alanlar için varsayılan değerleri kabul edin:

Alan	Değer
Bölge
Küme	example-cluster
İş türü	Spark
Ana sınıf veya jar	org.apache.spark.examples.SparkPi
Jar dosyaları	file:///usr/lib/spark/examples/jars/spark-examples.jar
Bağımsız değişkenler	1.000 (Bu değer, görev sayısını belirler.)

4. Submit'i (Gönder) tıklayın.

Not: İşin, Pi'yi hesaplamak için kullandığı yöntem: Spark işi, Pi değerini Monte Carlo yöntemini kullanarak tahmin eder. Koordinat düzleminde x, y noktaları oluşturarak bir birim karenin içinde yer alan bir daireyi modeller. Giriş bağımsız değişkeni (1.000), oluşturulacak x, y çiftlerinin sayısını belirler. Oluşturulan çift sayısı ne kadar fazlaysa tahmin doğruluğu da o kadar yüksek olur. Bu tahminde, hesaplama işlemini paralel hale getirmek için yönetilen Apache Spark çalışma düğümleri kullanılmaktadır. Daha fazla bilgi edinmek için Estimating Pi using the Monte Carlo Method (Monte Carlo Yöntemiyle Pi Tahmini) ve GitHub'daki JavaSparkPi.java sayfalarına göz atın.

İşiniz, Jobs (İşler) listesinde gösterilecektir. Bu listede, projenizdeki işler küme, tür ve geçerli durum bilgileriyle birlikte gösterilir. İş durumu, önce Çalışıyor, iş tamamlandıktan sonra ise Başarılı olarak gösterilir.

Yerine getirdiğiniz görevi doğrulamak için İlerleme durumumu kontrol et'i tıklayın.

İş gönderme

3. görev: İş çıkışını görüntüleme

Tamamlanan iş çıkışını görüntülemek için:

1. Jobs (İşler) listesinde ilgili iş kimliğini tıklayın.

2. LINE WRAP (Satır Kaydırma) için ON (Açık) değerini seçin veya ekranı en sağa kaydırarak Pi'nin hesaplanmış değerini görüntüleyin. LINE WRAP (Satır Kaydırma) ON (Açık) olarak ayarlandığında çıkış şu şekilde görünür:

İşiniz, Pi değerini başarılı şekilde kabaca hesapladı.

4. görev: Çalışan sayısını düzenlemek için kümeyi güncelleme

Kümenizdeki çalışan örneklerinin sayısını değiştirmek için:

1. Soldaki gezinme bölmesinden Clusters'ı (Kümeler) seçerek Managed Apache Spark Clusters (Kümeler) görünümüne dönün.

2. Clusters (Kümeler) listesinde example-cluster'ı tıklayın. Sayfada varsayılan olarak kümenizin CPU kullanımıyla ilgili bir genel bakış gösterilir.

3. Kümenizin geçerli ayarlarını görmek için Configuration'ı (Yapılandırma) tıklayın.

4. Edit'i (Düzenleyin) tıklayın. Artık çalışma düğümü sayısını düzenleyebilirsiniz.

5. Worker nodes (Çalışma düğümleri) alanına 4 yazın.

6. Save'i (Kaydet) tıklayın.

Artık kümeniz güncellenmiştir. Kümedeki sanal makine örneklerinin sayısını kontrol edin.

Yerine getirdiğiniz görevi doğrulamak için İlerleme durumumu kontrol et'i tıklayın.

Küme güncelleme

1. Bir işi güncellenmiş bir kümeyle yeniden çalıştırmak istiyorsanız soldaki bölmeden Jobs'ı (İşler) ve sonra SUBMIT JOB'ı (İŞİ GÖNDER) tıklayın.

2. Submit a job (İş gönderin) bölümünde ayarladığınız alanları ayarlayın:

Alan	Değer
Bölge
Küme	example-cluster
İş türü	Spark
Ana sınıf veya jar	org.apache.spark.examples.SparkPi
Jar dosyaları	file:///usr/lib/spark/examples/jars/spark-examples.jar
Bağımsız değişkenler	1.000 (Bu değer, görev sayısını belirler.)

3. Submit'i (Gönder) tıklayın.

5. görev: Öğrendiklerinizi test etme

Aşağıda, bu laboratuvarda ele alınan kavramları daha iyi anlamanızı sağlayacak çoktan seçmeli sorular yer almaktadır. Bu soruları elinizden geldiğince yanıtlamaya çalışın.

Tebrikler!

Google Cloud konsolunu kullanarak Managed Apache Spark kümesi oluşturup güncellemeyi ve sonra bu kümeye bir iş göndermeyi öğrendiniz.

Sonraki adımlar / Daha fazla bilgi

Bu laboratuvar, Qwik Starts laboratuvar serisinin de bir parçasıdır. Bu laboratuvarlar, Google Cloud'daki pek çok özelliği biraz olsun tanıtabilmek için tasarlamıştır. Katılabileceğiniz bir sonraki laboratuvarı bulmak için laboratuvar kataloğunda "Qwik Starts" listesini inceleyin.

Google Cloud eğitimi ve sertifikası

...Google Cloud teknolojilerinden en iyi şekilde yararlanmanıza yardımcı olur. Derslerimizde teknik becerilere odaklanırken en iyi uygulamalara da yer veriyoruz. Gerekli yetkinlik seviyesine hızlıca ulaşmanız ve öğrenim maceranızı sürdürebilmeniz için sizlere yardımcı olmayı amaçlıyoruz. Temel kavramlardan ileri seviyeye kadar farklı eğitim programlarımız mevcut. Ayrıca, yoğun gündeminize uyması için talep üzerine sağlanan, canlı ve sanal eğitim alternatiflerimiz de var. Sertifikasyonlar ise Google Cloud teknolojilerindeki becerilerinizi ve uzmanlığınızı doğrulamanıza ve kanıtlamanıza yardımcı oluyor.

Kılavuzun Son Güncellenme Tarihi: 27 Ağustos 2026

Laboratuvarın Son Test Edilme Tarihi: 27 Ağustos 2026

Telif Hakkı 2026 Google LLC. Tüm hakları saklıdır. Google ve Google logosu, Google LLC şirketinin ticari markalarıdır. Diğer tüm şirket ve ürün adları ilişkili oldukları şirketlerin ticari markaları olabilir.