Présentation

Dans cet atelier, vous allez apprendre à créer une instance Data Fusion et à déployer un exemple de pipeline qui vous est fourni. Le pipeline lit un fichier JSON dans Cloud Storage contenant les données sur les best-sellers du NYT. Le pipeline exécute ensuite des transformations sur le fichier pour analyser et nettoyer les données. Enfin, il charge un sous-ensemble des enregistrements dans BigQuery.

Objectifs

Dans cet atelier, vous allez apprendre à effectuer les tâches suivantes :

• Créer une instance Data Fusion
• Déployer un exemple de pipeline qui exécute des transformations sur un fichier JSON et filtre les résultats correspondants dans BigQuery

Configuration

Pour chaque atelier, nous vous attribuons un nouveau projet Google Cloud et un nouvel ensemble de ressources pour une durée déterminée, sans frais.

1. Connectez-vous à Google Skills dans une fenêtre de navigation privée.

2. Vérifiez le temps imparti pour l'atelier (par exemple : 01:15:00) : vous devez pouvoir le terminer dans ce délai.
   Une fois l'atelier lancé, vous ne pouvez pas le mettre en pause. Si nécessaire, vous pourrez le redémarrer, mais vous devrez tout reprendre depuis le début.

3. Lorsque vous êtes prêt, cliquez sur Démarrer l'atelier.

4. Notez vos identifiants pour l'atelier (Nom d'utilisateur et Mot de passe). Ils vous serviront à vous connecter à la console Google Cloud.

5. Cliquez sur Ouvrir la console Google.

6. Cliquez sur Utiliser un autre compte, puis copiez-collez les identifiants de cet atelier lorsque vous y êtes invité.
   Si vous utilisez d'autres identifiants, des messages d'erreur s'afficheront ou des frais seront appliqués.

7. Acceptez les conditions d'utilisation et ignorez la page concernant les ressources de récupération des données.

Se connecter à la console Google Cloud

1. Dans l'onglet ou la fenêtre de navigateur que vous utilisez pour cet atelier, copiez les données de Username (Nom d'utilisateur) indiqué dans le panneau Connection Details (Détails de connexion), puis cliquez sur le bouton Open Google Console (Ouvrir la console Google).

2. Collez les données de Username (Nom d'utilisateur) et de Password (Mot de passe) lorsque vous y êtes invité :
3. Cliquez sur Next (Suivant).
4. Acceptez les conditions d'utilisation.

Comme il s'agit d'un compte temporaire auquel vous aurez accès uniquement pendant la durée de cet atelier :

• n'ajoutez pas d'options de récupération ;
• ne vous inscrivez pas à des essais sans frais.

5. Une fois la console ouverte, affichez la liste des services en cliquant sur le menu de navigation () en haut à gauche.

Activer Cloud Shell

Cloud Shell est une machine virtuelle qui contient des outils pour les développeurs. Elle comprend un répertoire d'accueil persistant de 5 Go et s'exécute sur Google Cloud. Google Cloud Shell vous permet d'accéder via une ligne de commande à vos ressources Google Cloud. gcloud est l'outil de ligne de commande associé à Google Cloud. Il est préinstallé sur Cloud Shell et permet la saisie semi-automatique via la touche Tabulation.

1. Dans Google Cloud Console, dans le volet de navigation, cliquez sur Activer Cloud Shell ().

2. Cliquez sur Continuer.
   Le provisionnement et la connexion à l'environnement prennent quelques instants. Une fois connecté, vous êtes en principe authentifié, et le projet est défini sur votre ID_PROJET. Exemple :

Exemples de commandes

• Afficher le nom du compte actif :

(Résultat)

(Exemple de résultat)

• Afficher l'ID du projet :

(Résultat)

(Exemple de résultat)

Vérifier les autorisations du projet

Avant de commencer à travailler dans Google Cloud, vous devez vous assurer de disposer des autorisations adéquates pour votre projet dans IAM (Identity and Access Management).

1. Dans la console Google Cloud, accédez au menu de navigation (), puis cliquez sur IAM et administration > IAM.

2. Vérifiez que le compte de service Compute par défaut {project-number}-compute@developer.gserviceaccount.com existe et qu'il est associé au rôle Éditeur. Le préfixe du compte correspond au numéro du projet, disponible sur cette page : Menu de navigation > Présentation Cloud.

Si le compte n'est pas disponible dans IAM ou n'est pas associé au rôle Éditeur, procédez comme suit pour lui attribuer le rôle approprié.

1. Dans la console Google Cloud, accédez au menu de navigation et cliquez sur Présentation Cloud.

2. Sur la carte Informations sur le projet, copiez le numéro du projet.

3. Dans le menu de navigation, cliquez sur IAM et administration > IAM.

4. En haut de la page IAM, cliquez sur Ajouter.

5. Dans le champ Nouveaux comptes principaux, saisissez :

Remplacez {project-number} par le numéro de votre projet.

6. Dans le champ Sélectionnez un rôle, sélectionnez De base (ou Projet) > Éditeur.

7. Cliquez sur Enregistrer.

Tâche 1 : Activer l'API Cloud Data Fusion

1. Dans la console Cloud, accédez au menu de navigation (), puis sélectionnez API et services > Bibliothèque.

2. Dans le champ de recherche, saisissez Data Fusion pour trouver l'API Cloud Data Fusion, puis cliquez sur le lien hypertexte.

3. L'API est déjà activée. Cliquez sur Gérer, puis sur Désactiver l'API. Confirmez l'opération en cliquant sur Désactiver.

4. Une fois l'API désactivée, cliquez sur Activer pour la réactiver.

Tâche 2 : Créer une instance Cloud Data Fusion

1. Dans la console Google Cloud, accédez au menu de navigation (), puis cliquez sur Afficher tous les produits. Sous Analytics, cliquez sur Data Fusion.

2. Pour créer une instance Cloud Data Fusion, cliquez sur le lien Créer une instance en haut de la section.

3. Sur la page Créer une instance Data Fusion qui s'affiche :

a. Saisissez le nom de votre instance (par exemple, cdf-lab-instance).

b. Pour la région, sélectionnez us-central1.

c. Sous Édition, sélectionnez De base.

d. Dans la section Autorisation, cliquez sur Accorder l'autorisation si nécessaire.

e. Cliquez sur la flèche déroulante à côté d'Options avancées. Sous Surveillance et journalisation avancées, cochez la case Dataproc Cloud Logging.

f. Sans modifier les autres champs, cliquez sur Créer.

Cliquez sur Vérifier ma progression pour valider l'objectif. Créer une instance Cloud Data Fusion

Vous allez à présent accorder des autorisations au compte de service associé à l'instance en suivant les étapes ci-dessous.

4. Cliquez sur le nom de l'instance. Sur la page "Détails de l'instance", copiez la valeur du champ Compte de service Dataproc dans votre presse-papiers.

5. Dans la console Cloud, accédez au menu de navigation (), puis sélectionnez IAM et administration > IAM.

6. Sur la page des autorisations IAM, cliquez sur +Accorder l'accès.

7. Collez la valeur du champ Compte de service Dataproc dans le champ "Nouveaux principaux".

8. Cliquez dans le champ "Sélectionner un rôle" et commencez à saisir Agent de service de l'API Cloud Data Fusion, puis sélectionnez ce rôle lorsqu'il apparaît.

9. Cliquez sur Enregistrer.

Cliquez sur Vérifier ma progression pour valider l'objectif. Ajouter le rôle Agent de service de l'API Cloud Data Fusion au compte de service

Tâche 3 : Parcourir l'UI de Cloud Data Fusion

Lorsque vous utilisez Cloud Data Fusion, vous utilisez à la fois la console Cloud et l'UI distincte de Cloud Data Fusion.

• Dans la console Cloud, vous pouvez créer et supprimer des instances Cloud Data Fusion, et afficher les détails des instances Cloud Data Fusion.

• Dans l'UI Web de Cloud Data Fusion, vous pouvez accéder à plusieurs pages, telles que Pipeline Studio ou encore Wrangler, qui permettent d'utiliser les différentes fonctionnalités de Cloud Data Fusion.

Pour ouvrir l'UI de Cloud Data Fusion, procédez comme suit :

1. Dans la console Google Cloud, accédez au menu de navigation (), puis cliquez sur Afficher tous les produits. Sous Analytics, cliquez sur Data Fusion.

2. Cliquez sur le lien Afficher l'instance à côté de votre instance Data Fusion. Utilisez les identifiants qui vous ont été attribués pour cet atelier afin de vous connecter et, si nécessaire, cochez la case à côté de Gérer vos données Google Service Control. Cliquez sur Continuer.

3. Si vous êtes invité à découvrir le service, cliquez sur Annuler. L'UI de Cloud Data Fusion s'ouvre.

4. Notez que l'UI Web de Cloud Data Fusion est dotée de son propre panneau de navigation (à gauche) qui permet d'accéder à la page souhaitée.

Tâche 4 : Déployer un exemple de pipeline

Des exemples de pipelines sont disponibles dans le hub Cloud Data Fusion, qui vous permet de partager des pipelines, des plug-ins et des solutions Cloud Data Fusion réutilisables.

1. Dans l'UI Web de Cloud Data Fusion, cliquez sur HUB en haut à droite.

2. Dans le panneau de gauche, cliquez sur Pipelines.

3. Cliquez sur le pipeline Cloud Data Fusion Quickstart (Guide de démarrage rapide de Cloud Data Fusion), puis sur Create (Créer) dans le pop-up qui s'affiche.

4. Dans le panneau de configuration du pipeline "Cloud Data Fusion Quickstart" (Guide de démarrage rapide de Cloud Data Fusion), cliquez sur Finish (Terminer).

5. Cliquez sur Customize Pipeline (Personnaliser le pipeline). Une représentation visuelle de votre pipeline s'affiche dans Pipeline Studio. Il s'agit d'une interface graphique permettant de développer des pipelines d'intégration de données. Les plug-ins de pipeline disponibles sont listés sur la gauche, et votre pipeline est affiché dans la zone principale du canevas. Vous pouvez l'explorer en maintenant le pointeur sur chaque nœud de pipeline et en cliquant sur le bouton Properties (Propriétés) qui s'affiche. Le menu "Properties" (Propriétés) de chaque nœud vous permet d'afficher les objets et les opérations associés au nœud.

6. Dans le menu situé en haut à droite, cliquez sur Deploy (Déployer). Le pipeline est alors envoyé à Cloud Data Fusion. Vous l'exécuterez dans la section suivante.

Tâche 5 : Afficher votre pipeline

Le pipeline déployé apparaît dans la vue détaillée du pipeline, où vous pouvez effectuer les opérations suivantes :

• Afficher la structure et la configuration du pipeline

• Exécuter le pipeline manuellement, ou configurer un calendrier ou un déclencheur

• Afficher un résumé des exécutions historiques du pipeline, y compris les temps d'exécution, les journaux et les métriques

Tâche 6 : Exécuter votre pipeline

1. Dans la vue détaillée du pipeline, cliquez sur Run (Exécuter) en haut au centre pour exécuter le pipeline.

2. Au bout de quelques minutes, le pipeline se termine. Le pipeline passe à l'état Succeeded (Succès) et le nombre d'enregistrements traités par chaque nœud s'affiche.

Cliquez sur Vérifier ma progression pour valider l'objectif. Déployer et exécuter un exemple de pipeline

Tâche 7 : Afficher les résultats

Le pipeline écrit la sortie dans une table BigQuery. Vous pouvez le vérifier en procédant comme suit.

1. Cliquez sur ce lien pour ouvrir l'UI BigQuery dans la console Cloud. Vous pouvez également effectuer un clic droit sur l'onglet de la console et sélectionner Dupliquer, puis utiliser le menu de navigation () pour sélectionner BigQuery.

2. Dans le volet Explorateur classique, cliquez sur l'ID de votre projet (qui commence par qwiklabs).

3. Sous l'ensemble de données GCPQuickstart de votre projet, cliquez sur la table top_rated_inexpensive.

4. Cliquez sur + Requête SQL, collez la requête ci-dessous, puis cliquez sur Exécuter.

5. Attendez la fin de l'exécution de la requête. Une fenêtre de résultats similaire s'affiche.

Cliquez sur Vérifier ma progression pour valider l'objectif. Afficher les résultats

Félicitations !

Dans cet atelier, vous avez appris à créer une instance Data Fusion et à déployer un exemple de pipeline qui lit un fichier d'entrée depuis Cloud Storage, transforme et filtre les données pour générer un sous-ensemble de données dans BigQuery.

Terminer l'atelier

Une fois l'atelier terminé, cliquez sur Terminer l'atelier. Google Skills supprime les ressources que vous avez utilisées, puis efface le compte.

Si vous le souhaitez, vous pouvez noter l'atelier. Sélectionnez un nombre d'étoiles, saisissez un commentaire, puis cliquez sur Envoyer.

Voici à quoi correspond le nombre d'étoiles que vous pouvez attribuer à un atelier :

• 1 étoile = très insatisfait(e)
• 2 étoiles = insatisfait(e)
• 3 étoiles = ni insatisfait(e), ni satisfait(e)
• 4 étoiles = satisfait(e)
• 5 étoiles = très satisfait(e)

Si vous ne souhaitez pas donner votre avis, vous pouvez fermer la boîte de dialogue.

Pour soumettre des commentaires, suggestions ou corrections, veuillez accéder à l'onglet Assistance.

Dernière mise à jour du manuel : 17 décembre 2025

Dernier test de l'atelier : 17 décembre 2025

Copyright 2026 Google LLC Tous droits réservés. Google et le logo Google sont des marques de Google LLC. Tous les autres noms de société et de produit peuvent être des marques des sociétés auxquelles ils sont associés.