ARC110

Visão geral

Nos laboratórios com desafio, apresentamos uma situação e um conjunto de tarefas. Para concluí-las, em vez de seguir instruções detalhadas, você usará o que aprendeu nos laboratórios do curso. Um sistema automático de pontuação (mostrado nesta página) vai avaliar seu desempenho.

Nos laboratórios com desafio, não ensinamos novos conceitos do Google Cloud. O objetivo dessas tarefas é aprimorar aquilo que você já aprendeu, como a alteração de valores padrão ou a leitura e pesquisa de mensagens para corrigir seus próprios erros.

Para alcançar a pontuação de 100%, você precisa concluir todas as tarefas no tempo definido.

Configuração

Antes de clicar no botão Começar o Laboratório

Leia estas instruções. Os laboratórios são cronometrados e não podem ser pausados. O timer é ativado quando você clica em Iniciar laboratório e mostra por quanto tempo os recursos do Google Cloud vão ficar disponíveis.

Este laboratório prático permite que você realize as atividades em um ambiente real de nuvem, e não em uma simulação ou demonstração. Você vai receber novas credenciais temporárias para fazer login e acessar o Google Cloud durante o laboratório.

Confira os requisitos para concluir o laboratório:

• Acesso a um navegador de Internet padrão (recomendamos o Chrome).

• Tempo para concluir o laboratório: não se esqueça que, depois de começar, não será possível pausar o laboratório.

Cenário do desafio

Você começou a trabalhar com engenharia de dados em um cargo júnior. Até agora, você tem ajudado as equipes a criar e gerenciar dados usando o Pub/Sub, o Dataflow e o Cloud Storage.

Seu conhecimento precisa ser suficiente para realizar essas tarefas.

Seu desafio

Você precisa ajudar uma nova equipe de desenvolvimento com as tarefas iniciais de um projeto de streaming de mensagens ao vivo. Você vai auxiliar com uma simulação de streaming de mensagens ao vivo para o Cloud Storage usando o Pub/Sub e o Dataflow, e pediram para que conclua as seguintes tarefas:

• Usar a linha de comando para criar um tópico do Pub/Sub.
• Usar a linha de comando para criar um job do Cloud Scheduler e publicar mensagens no Pub/Sub em intervalos regulares.
• Usar a linha de comando para criar um bucket do Cloud Storage como o destino de saída de um job do Dataflow.
• Usar a linha de comando para criar e executar um job do Dataflow e transmitir dados de um tópico do Pub/Sub para um bucket do Cloud Storage. Em seguida, verificar os arquivos de saída no bucket do Cloud Storage.

Você precisa seguir estes padrões:

• Confirmar se as APIs necessárias (como a API Dataplex) foram ativadas corretamente.
• Criar todos os recursos na região , a menos que haja uma instrução diferente.
• Concluir o laboratório com desafio no Cloud Shell em vez do console, a menos que seja indicado o contrário.

Essas tarefas são descritas em detalhes a seguir. Boa sorte!

Tarefa 1: criar um tópico do Pub/Sub

• Use a linha de comando para criar um tópico do Pub/Sub chamado .

Clique em Verificar meu progresso para conferir o objetivo. Criar um tópico do Pub/Sub

Tarefa 2: criar um job do Cloud Scheduler

1. Use a linha de comando para criar um app do App Engine para seu projeto.
2. Use a linha de comando para criar um job do Cloud Scheduler neste projeto e publicar mensagens em intervalos de um minuto no tópico do Pub/Sub na tarefa 1. Corpo da mensagem: .
3. Use a linha de comando para iniciar o job do Cloud Scheduler.

Clique em Verificar meu progresso para conferir o objetivo. Criar um job do Cloud Scheduler

Tarefa 3: criar um bucket do Cloud Storage

• Use a linha de comando para criar um bucket do Cloud Storage com o seguinte nome:

Clique em Verificar meu progresso para conferir o objetivo. Criar um bucket do Cloud Storage

Tarefa 4: executar um pipeline do Dataflow para transmitir dados de um tópico do Pub/Sub para o Cloud Storage

1. Use a linha de comando para criar e executar um job do Dataflow para transmitir dados de um tópico do Pub/Sub para um bucket do Cloud Storage.

• Use o script Java ou Python que preferir. Exemplo de código disponível nas páginas do GitHub: java-docs-samples, python-docs-samples.
• Use o tópico do Pub/Sub que você criou na tarefa 1.
• Use o bucket do Cloud Storage criado na tarefa 3 como local de saída.
• Agrupe as mensagens com base em uma janela de tempo fixa de 2 minutos.

2. Use a linha de comando para verificar quais arquivos foram gravados no Cloud Storage.

Clique em Verificar meu progresso para conferir o objetivo. Executar um pipeline do Dataflow para transmitir dados de um tópico do Pub/Sub para o Cloud Storage

Parabéns!

Conquiste seu próximo selo de habilidade

Este laboratório autoguiado faz parte da Quest com selo de habilidade Criar um data lake de streaming no Cloud Storage. Após a conclusão, você ganha o selo de habilidade acima como reconhecimento. Compartilhe o selo no seu currículo e nas mídias sociais, e use #GoogleCloudBadge para anunciar sua conquista.

Treinamento e certificação do Google Cloud

Esses treinamentos ajudam você a aproveitar as tecnologias do Google Cloud ao máximo. Nossas aulas incluem habilidades técnicas e práticas recomendadas para ajudar você a alcançar rapidamente o nível esperado e continuar sua jornada de aprendizado. Oferecemos treinamentos que vão do nível básico ao avançado, com opções de aulas virtuais, sob demanda e por meio de transmissões ao vivo para que você possa encaixá-las na correria do seu dia a dia. As certificações validam sua experiência e comprovam suas habilidades com as tecnologias do Google Cloud.

Manual atualizado em 20 de setembro de 2023

Laboratório testado em 20 de setembro de 2023

Copyright 2025 Google LLC. Todos os direitos reservados. Google e o logotipo do Google são marcas registradas da Google LLC. Todos os outros nomes de produtos e empresas podem ser marcas registradas das respectivas empresas a que estão associados.