tf.Transform permet aux utilisateurs de définir des pipelines de prétraitement et de les exécuter à l'aide de frameworks de traitement de données à grande échelle, tout en ayant la possibilité d'exporter le pipeline dans le cadre d'un graphe TensorFlow.
Objectifs
Prétraiter des données et extraire de nouvelles caractéristiques à l'aide de tf.Transform
Créer et déployer un pipeline Apache Beam
Utiliser les données traitées pour entraîner un modèle "taxifare" (prix d'une course en taxi) en local, puis diffuser une prédiction
Préparation
Pour chaque atelier, nous vous attribuons un nouveau projet Google Cloud et un nouvel ensemble de ressources pour une durée déterminée, sans frais.
Connectez-vous à Qwiklabs dans une fenêtre de navigation privée.
Vérifiez le temps imparti pour l'atelier (par exemple : 01:15:00) : vous devez pouvoir le terminer dans ce délai.
Une fois l'atelier lancé, vous ne pouvez pas le mettre en pause. Si nécessaire, vous pourrez le redémarrer, mais vous devrez tout reprendre depuis le début.
Lorsque vous êtes prêt, cliquez sur Démarrer l'atelier.
Notez vos identifiants pour l'atelier (Nom d'utilisateur et Mot de passe). Ils vous serviront à vous connecter à Google Cloud Console.
Cliquez sur Ouvrir la console Google.
Cliquez sur Utiliser un autre compte, puis copiez-collez les identifiants de cet atelier lorsque vous y êtes invité.
Si vous utilisez d'autres identifiants, des messages d'erreur s'afficheront ou des frais seront appliqués.
Acceptez les conditions d'utilisation et ignorez la page concernant les ressources de récupération des données.
Tâche 1 : Lancer une instance de notebook Vertex AI
Dans le menu de navigation de Google Cloud Console, cliquez sur Vertex AI > Workbench.
Sur la page "Instances de notebook", cliquez sur Nouveau notebook > TensorFlow Enterprise > TensorFlow Enterprise 2.3 (avec LTS) > Sans GPU.
Dans la boîte de dialogue Nouvelle instance de notebook, vérifiez le nom de la VM deep learning. Si vous ne souhaitez pas modifier la région ni la zone, laissez tous les paramètres tels quels, puis cliquez sur Créer.
Le démarrage de la nouvelle VM prend deux à trois minutes.
Cliquez sur Ouvrir JupyterLab.
Une fenêtre JupyterLab s'ouvre dans un nouvel onglet.
Lorsque le pop-up Compilation recommandée s'affiche, cliquez sur Compiler. Si le message "Échec de la compilation" apparaît, ignorez-le.
Tâche 2 : Cloner un dépôt du cours dans votre instance de notebook Vertex AI
Pour cloner le notebook "training-data-analyst" dans votre instance JupyterLab :
Dans JupyterLab, cliquez sur l'icône Terminal pour ouvrir un nouveau terminal.
Pour vérifier que vous avez bien cloné le dépôt, double-cliquez sur le répertoire "training-data-analyst" et vérifiez que vous pouvez voir son contenu.
Vous y trouverez les fichiers de tous les ateliers de ce cours basés sur des notebooks Jupyter.
Tâche 3 : Explorer tf.Transform
Dans l'interface du notebook, accédez à training-data-analyst > courses > machine_learning > deepdive2 > feature_engineering > labs > 5_tftransform_taxifare.ipynb.
Dans l'interface du notebook, cliquez sur Modifier > Supprimer tous les éléments de sortie.
Lisez attentivement les instructions du notebook et complétez le code sur les lignes contenant la mention #TODO.
Conseil : Pour exécuter la cellule actuellement sélectionnée, vous pouvez cliquer dessus et appuyer sur Maj+Entrée. Vous trouverez les autres commandes de cellule dans l'interface du notebook, sous Exécuter.
Des conseils ont parfois été ajoutés pour vous aider à effectuer des tâches. Mettez le texte en surbrillance pour lire les conseils (texte en blanc).
Si vous avez besoin d'aide, reportez-vous à la solution complète. Pour cela, accédez à training-data-analyst > courses > machine_learning > deepdive2 > feature_engineering > solutions et ouvrez 5_tftransform_taxifare.ipynb.
Terminer l'atelier
Une fois l'atelier terminé, cliquez sur End Lab (Terminer l'atelier). Qwiklabs supprime les ressources que vous avez utilisées, puis efface le compte.
Si vous le souhaitez, vous pouvez noter l'atelier. Sélectionnez le nombre d'étoiles correspondant à votre note, saisissez un commentaire, puis cliquez sur Submit (Envoyer).
Le nombre d'étoiles que vous pouvez attribuer à un atelier correspond à votre degré de satisfaction :
1 étoile = très mécontent(e)
2 étoiles = insatisfait(e)
3 étoiles = ni insatisfait(e), ni satisfait(e)
4 étoiles = satisfait(e)
5 étoiles = très satisfait(e)
Si vous ne souhaitez pas donner votre avis, vous pouvez fermer la boîte de dialogue.
Pour soumettre des commentaires, suggestions ou corrections, veuillez utiliser l'onglet Support (Assistance).
Copyright 2020 Google LLC Tous droits réservés. Google et le logo Google sont des marques de Google LLC. Tous les autres noms d'entreprises et de produits peuvent être des marques des entreprises auxquelles ils sont associés.
Les ateliers créent un projet Google Cloud et des ressources pour une durée déterminée.
Les ateliers doivent être effectués dans le délai imparti et ne peuvent pas être mis en pause. Si vous quittez l'atelier, vous devrez le recommencer depuis le début.
En haut à gauche de l'écran, cliquez sur Démarrer l'atelier pour commencer.
Utilisez la navigation privée
Copiez le nom d'utilisateur et le mot de passe fournis pour l'atelier
Cliquez sur Ouvrir la console en navigation privée
Connectez-vous à la console
Connectez-vous à l'aide des identifiants qui vous ont été attribués pour l'atelier. L'utilisation d'autres identifiants peut entraîner des erreurs ou des frais.
Acceptez les conditions d'utilisation et ignorez la page concernant les ressources de récupération des données.
Ne cliquez pas sur Terminer l'atelier, à moins que vous n'ayez terminé l'atelier ou que vous ne vouliez le recommencer, car cela effacera votre travail et supprimera le projet.
Ce contenu n'est pas disponible pour le moment
Nous vous préviendrons par e-mail lorsqu'il sera disponible
Parfait !
Nous vous contacterons par e-mail s'il devient disponible
Un atelier à la fois
Confirmez pour mettre fin à tous les ateliers existants et démarrer celui-ci
Utilisez la navigation privée pour effectuer l'atelier
Ouvrez une fenêtre de navigateur en mode navigation privée pour effectuer cet atelier. Vous éviterez ainsi les conflits entre votre compte personnel et le compte temporaire de participant, qui pourraient entraîner des frais supplémentaires facturés sur votre compte personnel.
tf.transform permet aux utilisateurs de définir des pipelines de prétraitement et de les exécuter à l'aide de frameworks de traitement de données à grande échelle, tout en ayant la possibilité d'exporter le pipeline dans le cadre d'un graphe TensorFlow.
Durée :
0 min de configuration
·
Accessible pendant 120 min
·
Terminé après 120 min