Visão geral

O BigQuery é um banco de dados de análise NoOps, totalmente gerenciado e de baixo custo desenvolvido pelo Google. Com ele, você pode consultar muitos terabytes de dados sem ter que gerenciar uma infraestrutura ou precisar de um administrador de banco de dados. O BigQuery usa SQL e está disponível no modelo de pagamento por uso. Assim, você pode se concentrar na análise dos dados para encontrar insights relevantes.

O BigQuery Machine Learning é um recurso do BigQuery usado por analistas de dados para criar, treinar, avaliar e fazer previsões utilizando modelos de machine learning e um mínimo de programação.

Neste laboratório, você usará o conjunto de dados de bicicletas de Londres para criar um modelo de regressão no BigQuery ML e prever a duração dos passeios. Digamos que você trabalha em uma empresa de aluguel de bicicletas que oferece dois tipos de bicicleta: um modelo mais resistente para deslocamento diário e um modelo de estrada mais rápido e mais frágil. Para aluguéis de longa duração, precisamos ter as bicicletas de estrada em estoque. Mas para aluguéis de curta duração, precisamos dos modelos para deslocamento diário. Portanto, para criar um sistema de estocagem, precisamos prever a duração dos aluguéis.

Objetivos

Neste laboratório, você aprenderá a realizar estas tarefas:

• Consultar e analisar o conjunto de dados de bicicletas de Londres para fazer engenharia de atributos
• Criar um modelo de regressão linear no BigQuery ML
• Avaliar o desempenho do seu modelo de machine learning
• Extrair os pesos do seu modelo

Pré-requisitos

• Um projeto do Google Cloud
• Um navegador (como o Google Chrome ou o Mozilla Firefox)

Configuração e requisitos

Para cada laboratório, você recebe um novo projeto do Google Cloud e um conjunto de recursos por um determinado período sem custo financeiro.

1. Faça login no Google Skills usando uma janela anônima.

2. Confira o tempo de acesso do laboratório (por exemplo, 1:15:00) e finalize todas as atividades nesse prazo.
   Não é possível pausar o laboratório. Você pode reiniciar o desafio, mas vai precisar refazer todas as etapas.

3. Quando tudo estiver pronto, clique em Começar o laboratório.

4. Anote as credenciais (Nome de usuário e Senha). É com elas que você vai fazer login no Console do Google Cloud.

5. Clique em Abrir Console do Google.

6. Clique em Usar outra conta, depois copie e cole as credenciais deste laboratório nos locais indicados.
   Se você usar outras credenciais, vai receber mensagens de erro ou cobranças.

7. Aceite os termos e pule a página de recursos de recuperação.

Abra o BigQuery no console do Cloud

1. No console do Google Cloud, acesse o menu de navegação e clique em BigQuery.
   A caixa de diálogo Olá! Este é o BigQuery no console do Cloud vai aparecer. Ela tem um link para o guia de início rápido e lista as atualizações da interface.

2. Clique em Concluído para fechar a caixa de diálogo.

Tarefa 1: analise os dados de uso das bicicletas para a engenharia de atributos

A primeira etapa para solucionar um problema de ML é a formulação, ou seja, identificar os atributos do modelo e o rótulo. Já que o objetivo do primeiro modelo é prever a duração do aluguel com base no conjunto de dados históricos, o rótulo é a duração.

Se acharmos que a duração varia de acordo com a estação onde a bicicleta é alugada, o dia da semana e o horário do dia, esses serão os atributos. Mas antes de criar um modelo com eles, é melhor verificar se esses fatores realmente influenciam o rótulo.

O processo de identificar os atributos de um modelo de machine learning é chamado de engenharia de atributos. Geralmente, a engenharia de atributos é a parte mais importante na criação de modelos de ML precisos. Ela pode ter maior impacto do que o algoritmo usado ou o ajuste de hiperparâmetros. Para uma boa engenharia de atributos, é preciso entender bem os dados e o domínio. O processo se resume a testar hipóteses. Você pensa em um atributo, verifica se ele funciona (se tem informações mútuas com o rótulo) e depois o adiciona ao modelo. Se ele não funcionar, basta tentar novamente.

Impacto da estação

Para verificar se a duração do aluguel varia de acordo com a estação, visualizamos o resultado da consulta abaixo no Data Studio.

1. No EDITOR de consulta, cole o seguinte:

2. Clique em EXECUTAR.
3. Clique em EXPLORAR DADOS > Explorar com o Data Studio no Console do Cloud do BigQuery.
4. Quando solicitado, selecione o botão PRIMEIROS PASSOS.
5. Selecione AUTORIZAR para permitir que o Google Data Studio acesse seus dados.

6. Na guia Gráfico, selecione Gráfico de colunas.

7. Na guia DADOS do menu no lado direito, faça estas configurações:

• Dimensão: start_station_name
• Métrica: duration
• Classificação: por duração, em ordem Descendente.
• Interações de gráfico: verifique as opções Cruzamento de filtros e Mudar classificação.

8. Na guia ESTILO do menu no lado direito, faça estas configurações:

• Gráfico de barras: Vertical
• Barras: 100
• Eixos: Mostrar eixos

Seu plot será semelhante a este:

Algumas estações estão relacionadas a aluguéis de longa duração (mais de 3.000 segundos), mas, na maioria das estações, o intervalo de duração é relativamente curto. Se todas as estações de Londres tivessem um intervalo de duração curto, a estação de início do aluguel não seria um bom atributo. Mas neste problema, como demonstra o gráfico, start_station_name é importante.

Não podemos usar end_station_name como atributo porque, no momento em que o aluguel é feito, não sabemos onde a bicicleta será devolvida. Ao criar um modelo de machine learning para prever eventos no futuro, não podemos usar colunas com valores desconhecidos no momento em que o modelo faz a previsão. Essa limitação de tempo ou causalidade impõe alguns limites aos atributos que podemos usar.

Impacto do dia da semana e do horário do dia

Para os próximos candidatos a atributos, o processo é semelhante. Podemos verificar se dayofweek ou hourofday são importantes.

1. Na janela do editor de consultas, cole a seguinte consulta:

2. Veja os dados no Data Studio. Para o dia da semana, sua visualização será semelhante a esta:

Para o horário do dia, sua visualização será semelhante a esta:

A duração varia de acordo com o dia da semana e com o horário. Parece que a duração dos aluguéis é mais longa nos fins de semana (dias 1 e 7) do que nos dias úteis. A duração também é maior no início da manhã e no meio da tarde. Portanto, dayofweek e hourofday são ambos bons atributos.

Impacto do número de bicicletas

Outro atributo possível é o número de bicicletas na estação. Nós formulamos a hipótese de que as pessoas manteriam as bicicletas por mais tempo se houvesse um número menor delas na estação de retirada.

1. Na janela do editor de consultas, cole a seguinte consulta:

2. Confira os dados no Data Studio.

A relação entre os fatores é confusa e não mostra uma tendência clara (em comparação com hour-of-day (hora do dia), por exemplo). Isso indica que o número de bicicletas não é um bom atributo.

Tarefa 2: crie um conjunto de dados de treinamento

Com base na análise do conjunto de dados de bicicletas e na relação das demais colunas com a coluna do rótulo, podemos extrair os atributos e o rótulo para preparar o conjunto de dados de treinamento:

As colunas de atributos precisam ser do tipo numérico (INT64, FLOAT64 etc.) ou categórico (STRING). Quando precisamos tratar um atributo numérico como categórico, é necessário convertê-lo em uma string. Foi por isso que convertemos em strings as colunas dayofweek e hourofday, que são números inteiros (nos intervalos de 1 a 7 e 0 a 23, respectivamente).

Quando a preparação dos dados envolve um excesso de operações de transformação ou mesclagem, é melhor salvar os dados de treinamento preparados em uma tabela para não repetir esse trabalho na experimentação. Quando as transformações são comuns, mas a consulta em si é longa, talvez seja melhor salvá-la em uma visualização para evitar a repetição.

Neste caso em que a consulta é simples e curta, para facilitar, não vamos salvá-la.

1. No BigQuery, crie um conjunto de dados chamado bike_model para armazenar seu modelo.
2. Em Local dos dados, selecione UE já que os dados de treinamento estão na União Europeia.
3. Clique em Criar conjunto de dados.

Para treinar e salvar o modelo de ML no conjunto de dados bike_model, precisamos chamar CREATE MODEL, que é semelhante a CREATE TABLE. Como o rótulo que queremos prever é numérico, este é um problema de regressão. Por isso, a opção mais apropriada é escolher linear_reg no tipo de modelo emOPTIONS.

4. Digite esta consulta no editor de consultas:

O treinamento do modelo demora de dois a três minutos.

5. Para ver algumas métricas relacionadas ao treinamento do modelo, digite esta consulta na janela do editor do BigQuery:

O erro absoluto médio é de 1.025 segundos, ou cerca de 17 minutos. Isso significa que podemos prever a duração dos aluguéis de bicicleta com um erro médio de cerca de 17 minutos.

Clique em Verificar meu progresso para ver o objetivo. Crie um conjunto de dados de treinamento

Tarefa 3: melhore o modelo com a engenharia de atributos

Combine os dias da semana

Existem outras maneiras de representar os recursos disponíveis. Por exemplo, nós analisamos a relação entre dayofweek e duration dos aluguéis, constatando que a duração era maior nos fins de semana. Portanto, em vez de tratar o valor bruto de dayofweek como um atributo, podemos usar essa informação para unir vários valores de dayofweek na categoria "weekday".

1. Use esta consulta para criar um modelo do BigQuery ML com o atributo combinado de dias da semana:

2. Para ver as métricas para este modelo, insira a consulta a seguir na janela do editor do BigQuery:

Este modelo tem um erro absoluto médio de 966 segundos, menor do que o valor de 1.025 segundos do modelo original. Estamos progredindo.

Agrupe a hora do dia em classes

Com base na relação entre hourofday e duration, podemos agrupar as variáveis em quatro classes: (-inf,5), [5,10), [10,17) e [17,inf).

1. Use esta consulta para criar um modelo de BigQuery ML com a hora do dia agrupada em classes e os atributos combinados de dia da semana:

2. Para ver as métricas para este modelo, insira a consulta a seguir na janela do editor do BigQuery:

Este modelo tem um erro absoluto médio de 904 segundos, menor do que o valor de 966 segundos do modelo de dias da semana/fim de semana. Estamos cada vez melhores.

Clique em Verificar meu progresso para ver o objetivo. Melhore o modelo com a engenharia de atributos

Tarefa 4: faça previsões

Nosso melhor modelo contém várias transformações de dados. Não seria ótimo se o BigQuery lembrasse dos conjuntos de transformações que fizemos no treinamento e os aplicasse automaticamente no momento da previsão? Ele pode fazer isso com a cláusula TRANSFORM.

Neste caso, o modelo resultante precisa apenas de start_station_name e start_date para prever duration. As transformações são salvas e feitas nos dados brutos fornecidos para criar os atributos de entrada do modelo. A principal vantagem de colocar todas as funções de pré-processamento dentro da cláusula TRANSFORM é que os clientes do modelo não precisam saber qual pré-processamento foi realizado.

1. Crie um modelo do BigQuery ML com a cláusula TRANSFORM que incorpore a hora do dia agrupada em classes e os atributos combinados de dia da semana. Para isso, use esta consulta:

2. Com a cláusula TRANSFORM implantada, digite esta consulta para prever a duração do aluguel em Park Lane agora mesmo (seu resultado será diferente):

3. Para fazer previsões em lote usando uma amostra de 100 linhas do conjunto de treinamento, execute esta consulta:

Clique em Verificar meu progresso para ver o objetivo. Faça previsões

Tarefa 5: examine os pesos do modelo

Os modelos de regressão linear preveem o resultado de uma soma ponderada dos valores de entrada. Às vezes, é preciso usar os pesos do modelo em um ambiente de produção.

• Use esta consulta para examinar (ou exportar) os pesos do seu modelo:

  SELECT * FROM ML.WEIGHTS(MODEL bike_model.model_bucketized)

  Os atributos numéricos recebem um único peso, enquanto os atributos categóricos recebem um peso para cada valor possível. Por exemplo, o atributo dayofweek tem estes pesos:

  

  Isso significa que, em dias úteis, a contribuição desse atributo para a duração geral prevista é de 1.709 segundos. Como os pesos que dão o melhor desempenho não são exclusivos, talvez seu resultado seja diferente.

  Clique em Verificar meu progresso para ver o objetivo. Examine os pesos do modelo

Finalize o laboratório

Após terminar seu laboratório, clique em End Lab. O Qwiklabs removerá os recursos usados e limpará a conta para você.

Você poderá avaliar sua experiência neste laboratório. Basta selecionar o número de estrelas, digitar um comentário e clicar em Submit.

O número de estrelas indica o seguinte:

• 1 estrela = muito insatisfeito
• 2 estrelas = insatisfeito
• 3 estrelas = neutro
• 4 estrelas = satisfeito
• 5 estrelas = muito satisfeito

Feche a caixa de diálogo se não quiser enviar feedback.

Para enviar seu feedback, fazer sugestões ou correções, use a guia Support.

Copyright 2026 Google LLC. Todos os direitos reservados. Google e o logotipo do Google são marcas registradas da Google LLC. Todos os outros nomes de empresas e produtos podem ser marcas registradas das empresas a que estão associados.