GSP1145

Огляд

Dataplex — це інтелектуальна структура даних, завдяки якій організації можуть централізовано шукати, контролювати й відстежувати дані в озерах, сховищах і вітринах із метою аналізу у великих масштабах.

Data Catalog – це повністю керований масштабований сервіс обробки метаданих у Dataplex, який можна використовувати для позначення тегами об’єктів даних і пошуку об’єктів, до яких ви маєте доступ. Теги дають змогу додавати власні поля метаданих до певних об’єктів даних для полегшення їх ідентифікації і пошуку (наприклад, позначення певних об’єктів, які містять захищені або чутливі дані). Ви також можете створювати шаблони тегів для багаторазового використання, щоб швидко призначати однакові теги різним об’єктам даних.

Під час цього практичного заняття ви дізнаєтесь, як за допомогою Data Catalog у Dataplex створити шаблон тегу, застосувати його до об’єктів Dataplex, а потім використовувати тег для пошуку об’єктів.

Завдання

• Увімкнути Dataplex і Data Catalog API
• Створити озеро, зону й об’єкт Dataplex
• Створити шаблон тегу
• Застосувати шаблон тегу до об’єктів Dataplex
• Шукати об’єкти за тегами

Налаштування й вимоги

Перш ніж натиснути кнопку Start Lab (Почати практичну роботу)

Ознайомтеся з наведеними нижче вказівками. На виконання практичного заняття відводиться обмежений час, і його не можна призупинити. Щойно ви натиснете Почати заняття, з’явиться таймер, який показуватиме, скільки часу для роботи з ресурсами Google Cloud у вас залишилося.

Ви зможете виконати практичне заняття в дійсному робочому хмарному середовищі (не в симуляції або демонстраційному середовищі). Для цього на час практичного заняття вам надаються тимчасові облікові дані для реєстрації і входу в Google Cloud.

Для цього практичного заняття потрібно мати:

• стандартний вебпереглядач, наприклад Chrome (рекомендовано);

Примітка. Виконуйте практичне заняття в анонімному вікні вебпереглядача (рекомендовано). Так ви уникнете додаткової плати, що може стягуватися з вашого особистого облікового запису внаслідок його помилкового використання замість облікового запису для навчання.

• достатню кількість часу, оскільки почавши практичне заняття, ви не зможете призупинити його.

Примітка. Для виконання цього практичного заняття використовуйте лише обліковий запис для навчання, оскільки з іншого облікового запису Google Cloud може стягуватися плата.

Як почати виконувати практичну роботу й увійти в Google Cloud Console

1. Натисніть кнопку Start Lab (Почати практичне заняття). Якщо за практичне заняття необхідно заплатити, відкриється вікно, де ви зможете обрати спосіб оплати. Ліворуч розміщено панель "Відомості про практичне заняття" з такими компонентами:

   • кнопка "Відкрити консоль Google";
   • час до закінчення;
   • тимчасові облікові дані, які потрібно використовувати для доступу до цього практичного заняття;
   • інша інформація, необхідна для виконання цього практичного заняття.

2. Натисніть Відкрити консоль Google або натисніть правою кнопкою миші й виберіть Відкрити анонімне вікно, якщо ви використовуєте вебпереглядач Chrome.

   Завантажаться необхідні ресурси. Потім відкриється нова вкладка зі сторінкою "Увійти".

   Порада. Упорядковуйте вкладки в окремих вікнах, розміщуючи їх поруч.

   Примітка. Якщо з’явиться вікно Виберіть обліковий запис, натисніть Вибрати інший обліковий запис.

3. За потреби скопіюйте значення в полі Username (Ім’я користувача) нижче й вставте його у вікні Вхід.

   {{{user_0.username | "Username"}}}

   Поле "Ім’я користувача" також можна знайти на панелі "Відомості про практичне заняття".

4. Натисніть Далі.

5. Скопіюйте значення в полі Password (Пароль) нижче й вставте його у вікні Welcome (Привітання).

   {{{user_0.password | "Password"}}}

   Поле "Пароль" також можна знайти на панелі "Відомості про практичне заняття".

6. Натисніть Далі.

   Важливо. Обов’язково використовуйте облікові дані, призначені для відповідного практичного заняття. Не використовуйте облікові дані Google Cloud. Примітка. Якщо ввійти у власний обліковий запис Google Cloud, може стягуватися додаткова плата.

7. Що від вас очікується

   • Прийміть Умови використання.
   • Не додавайте способи відновлення й двохетапну перевірку (оскільки це тимчасовий обліковий запис).
   • Не реєструйте безкоштовні пробні версії.

Через кілька секунд консоль Google Cloud відкриється в новій вкладці.

Примітка. Щоб отримати доступ до продуктів і сервісів Google Cloud, натисніть меню навігації або введіть назву сервісу чи продукту в полі пошуку.

Увімкніть Dataplex і Data Catalog API

1. У рядку пошуку вгорі Google Cloud Console введіть Cloud Dataplex API.

2. Серед результатів у розділі Marketplace (Торговельний майданчик) виберіть Cloud Dataplex API.

3. Якщо API ще не ввімкнено, натисніть Enable (Увімкнути).

4. Повторіть кроки 1–3 для Google Cloud Data Catalog API.

Завдання 1. Створіть озеро, зону й об’єкт

У цьому завданні ви створите нове озеро даних Dataplex для зберігання інформації про замовлення клієнтів, додасте до озера спеціально підібрану зону, а потім долучите до неї попередньо створений набір даних BigQuery як новий об’єкт.

Створіть озеро даних

1. У меню навігації () консолі Google Cloud натисніть View all products (Переглянути всі продукти). У розділі Analytics (Аналітика) натисніть Dataplex Universal Catalog.

Якщо з’явиться запит Welcome to the new Dataplex experience (Вітаємо в новому інтерфейсі Dataplex), натисніть Close (Закрити).

2. У розділі Manage lakes (Керувати озерами даних) натисніть Manage (Керувати).

3. Натисніть Create (Створити).

4. Введіть необхідну інформацію.

Властивість	Значення
Display Name (Відображувана назва)	Orders Lake (Озеро даних замовлень)
ID (Ідентифікатор)	Залиште значення за умовчанням.
Region (Регіон)

Залиште інші значення за умовчанням.

5. Натисніть Create (Створити).

Озеро буде створено протягом кількох хвилин.

Ви зможете перейти до наступного розділу, коли озеро матиме статус Active (Активне).

Додайте зону в озеро даних

1. Натисніть назву потрібного озера на вкладці Manage (Керувати).

2. Виберіть Add zone (Додати зону).

3. Введіть необхідну інформацію.

Властивість	Значення
Display Name (Відображувана назва)	Customer Curated Zone (Спеціально підібрана зона для клієнта)
ID (Ідентифікатор)	Залиште значення за умовчанням.
Type (Тип)	Curated zone (Підібрана зона)
Data locations (Місцезнаходження даних)	Regional (Регіональне)

Залиште інші значення за умовчанням.

Наприклад, за умовчанням буде ввімкнено параметр Enable metadata discovery (Увімкнути пошук метаданих) у розділі Discovery settings (Налаштування пошуку), який дає авторизованим користувачам змогу знаходити дані в зоні.

4. Натисніть Create (Створити).

Зону буде створено протягом кількох хвилин.

Ви зможете перейти до наступного розділу, коли зона матиме статус Active (Активна).

Додайте об’єкт у зону

1. Натисніть назву потрібної зони на вкладці Zones (Зони).

2. Виберіть Add assets (Додати об’єкти) на вкладці Assets (Об’єкти).

3. Натисніть Add an asset (Додати об’єкт).

4. Введіть необхідну інформацію.

Властивість	Значення
Type (Тип)	BigQuery dataset (Набір даних BigQuery)
Display Name (Відображувана назва)	Customer Details Dataset (Набір даних з інформацією про клієнта)
ID (Ідентифікатор)	Залиште значення за умовчанням.
Dataset (Набір даних)	.customers

Залиште інші значення за умовчанням.

5. Натисніть Continue (Продовжити).

6. У розділі Discovery settings (Налаштування пошуку) виберіть параметр Inherit (Успадкувати), щоб об’єкт успадкував налаштування пошуку на рівні зони, а потім натисніть Continue (Продовжити).

7. Натисніть Submit (Надіслати).

Створіть озеро, зону й об’єкт Dataplex

Завдання 2. Створіть шаблон тегу

Щоб почати позначати дані тегами, спочатку потрібно створити принаймні один шаблон тегу. Шаблон тегу може бути загальнодоступним або приватним. Коли ви створюєте новий шаблон тегу, за умовчанням рекомендується створити загальнодоступний варіант. Користувачі, які мають необхідні дозволи для об’єкта даних, можуть переглядати всі загальнодоступні теги, пов’язані з ним. Завдяки цьому забезпечується простий пошук за категоріями, а також контроль доступу на основі критеріїв, застосованих до базових даних.

У цьому завданні ви створите загальнодоступний шаблон тегу для позначення стовпців таблиці BigQuery із захищеним статусом. За допомогою загальнодоступного шаблону тегів користувачі, які мають доступ до базових стовпців таблиці BigQuery, зможуть бачити теги, застосовані до цих стовпців.

1. У меню ліворуч у розділі Manage Metadata (Керувати метаданими) натисніть Catalog (Каталог).

2. Натисніть Create tag template (Deprecated) (Створити шаблон тегу (не підтримується)).

3. Коли з’явиться запит Are you sure you want to continue? (Продовжити?), натисніть Proceed (Продовжити).

Примітка. Шаблони тегів зараз замінюються типами аспектів, але все ще працюють. Щоб створити шаблон тегу, виконайте наведені нижче дії.

Ми плануємо оновити це практичне заняття так, щоб у ньому використовувалися типи аспектів. Ці зміни буде відображено найближчим часом.

4. Введіть необхідну інформацію, щоб визначити шаблон тегу.

Властивість	Значення
Template Display Name (Відображувана назва шаблона)	Protected Data Template (Шаблон захищених даних)
Template ID (Ідентифікатор шаблона)	Залиште значення за умовчанням.
Location (Місцезнаходження)
Visibility (Видимість)	Public (Для всіх)

5. Натисніть Add field (Додати поле) і введіть необхідну інформацію, щоб додати нове поле в шаблон.

Властивість	Значення
Field Display Name (Відображувана назва поля)	Protected Data Flag (Позначка захищених даних)
Field ID (Ідентифікатор поля)	Залиште значення за умовчанням.
Type (Тип)	Enumerated (Пронумеровані)

6. Виберіть Enumerated values (Пронумеровані значення) > Values 1 (Значення 1) і введіть YES.

7. Натисніть Add value (Додати значення) і для параметра Values 2 (Значення 2) введіть NO.

8. Натисніть Done (Готово).

9. Натисніть Create (Створити).

Примітка. Може пройти кілька хвилин, перш ніж шаблон тегу буде створено (має з’явитися відповідне повідомлення). Створіть шаблон тегу

Завдання 3. Застосуйте шаблон тегу до об’єктів Dataplex

Створивши шаблон тегу, ви можете за його допомогою додавати теги будь-якій кількості потрібних об’єктів даних, до яких у вас є доступ.

У цьому завданні ви застосуєте раніше створений шаблон тегів до певних стовпців у таблиці BigQuery, яким потрібно надати статус захищених даних.

1. У меню ліворуч у розділі Discover (Огляд) натисніть Search (Пошук).

2. У розділі Filters (Фільтри) > Systems (Системи) поставте прапорець для параметра Dataplex.

3. Натисніть таблицю customer_details.

Якщо таблиці customer_details немає, зачекайте кілька хвилин, а потім оновіть сторінку, щоб завантажити новий список об’єктів Dataplex.

4. Натисніть Attach tags (Додати теги).

5. У розділі Choose what to tag (Виберіть, що потрібно позначити тегом) поставте прапорці для таких стовпців:

   • zip (поштовий індекс)
   • state (штат)
   • last_name (прізвище)
   • country (країна)
   • email (електронна пошта)
   • latitude (широта)
   • first_name (ім’я)
   • city (місто)
   • longitude (довгота)

6. Натисніть OK.

7. У розділі Choose the tag templates (Виберіть шаблони тегів) натисніть Protected data template (Шаблон захищених даних).

8. Для параметра Protected data flag (Позначка захищених даних) виберіть YES (ТАК).

9. Натисніть Save (Зберегти).

Примітка. Може пройти кілька хвилин, перш ніж шаблон тегу буде застосовано (має з’явитися відповідне повідомлення). Застосуйте шаблон тегу до об’єктів Dataplex

Завдання 4. Шукайте об’єкти за допомогою тегів

Позначивши тегами об’єкти даних, ви можете шукати їх за допомогою Data Catalog у Dataplex.

У цьому завданні ви шукатимете об’єкти, які було позначено тегами за допомогою шаблону тегу "Захищені дані".

1. У меню ліворуч у розділі Discover (Огляд) натисніть Search (Пошук).

2. У розділі Filters (Фільтри) > Tags (Теги) поставте прапорець для параметра Protected data template (Шаблон захищених даних).

3. Натисніть таблицю customer_details.

4. Перейдіть на вкладку Schema and column tags (Схема й теги стовпців), щоб переглянути теги захищених даних у вказаних стовпцях.

Вітаємо!

За допомогою Data Catalog у Dataplex ви створили шаблон тегу, застосували його до об’єктів Dataplex, а потім скористалися тегом для пошуку об’єктів.

Навчання й сертифікація Google Cloud

…допомагають ефективно використовувати технології Google Cloud. Наші курси передбачають опанування технічних навичок, а також ознайомлення з рекомендаціями, що допоможуть вам швидко зорієнтуватися й вивчити матеріал. Ми пропонуємо курси різних рівнів – від базового до високого. Ви можете вибрати формат навчання (за запитом, онлайн або офлайн) відповідно до власного розкладу. Пройшовши сертифікацію, ви перевірите й підтвердите свої навички та досвід роботи з технологіями Google Cloud.

Посібник востаннє оновлено 23 травня 2025 року

Практичне заняття востаннє протестовано 23 травня 2025 року

© Google LLC 2025. Усі права захищено. Назва та логотип Google є торговельними марками Google LLC. Усі інші назви компаній і продуктів можуть бути торговельними марками відповідних компаній, з якими вони пов’язані.