Google Cloud: Introdução ao BigQuery

O que é BigQuery?

  • O BigQuery é uma ferramenta de big data totalmente gerenciada para empresas que precisam de um serviço de consulta interativa baseado em nuvem para grandes conjuntos de dados.
  • O BigQuery não é um banco de dados, é um serviço de consulta.
  • O BigQuery oferece suporte a consultas SQL, o que o torna bastante amigável. Ele pode ser acessado do Console, CLI ou usando SDK. Você pode consultar bilhões de linhas, leva apenas alguns segundos para gravar e segundos para retornar.
  • Você pode usar suas APIs REST e realizar seu trabalho enviando uma solicitação JSON.
  • Vamos entender com a ajuda de um exemplo: suponha que você seja um analista de dados e precise analisar toneladas de dados. Se você escolher uma ferramenta como o MySQL tradicional, você precisa ter uma infraestrutura pronta, que possa armazenar esses enormes dados.
  • Você pode se concentrar na análise em vez de trabalhar na infraestrutura. O hardware é completamente abstraído.
  • Projetar essa infraestrutura em si será uma tarefa difícil porque você terá que descobrir o tamanho da RAM, o tipo de CPU ou quaisquer outras configurações.
  • O BigQuery é principalmente para Big Data. Você não deve confundi-lo com o banco de dados OLTP (Online Transaction Processing).
  • Conjuntos de dados: os conjuntos de dados contêm uma ou mais tabelas de dados.
  • Tabelas: as tabelas são estruturas linha-coluna que contêm dados reais
  • Trabalhos: operações que você executa nos dados, como carregamento de dados, execução de consultas ou exportação de dados.
  1. Este laboratório orienta você no Cloud BigQuery.
  2. Você criará um conjunto de dados do BigQuery e carregará os dados CSV.
  1. Faça login no console do GCP.
  2. Criação de um conjunto de dados do BigQuery.
  3. Crie uma tabela.
  4. Carregando os dados por meio de um CSV externo.
  5. Leitura de dados através da Tabela usando Consulta SQL.
  1. Clique no ícone de hambúrguer no canto superior esquerdo
  2. Clique em BigQuery na seção BigData.

4. Clique nos três pontos e clique em Criar conjunto de dados .

5. Insira a id do conjunto de dados como whizlabs_bq_dataset .

6. Escolha o local dos dados como Estados Unidos (EUA) .

7. Mantenha as opções fornecidas como estão.

8. Clique em Criar conjunto de dados .

9. Clique na seta para a direita na barra lateral para expandir o projeto.

10. Você poderá ver o conjunto de dados . Clique no conjunto de dados .

12. Você pode ver o ícone + para criar uma tabela e fazer o upload dos dados.

Carregando o arquivo de origem:

  1. Clique em Criar Tabela.
  2. Escolha a opção Upload in Source .
  3. Clique em Browse para escolher o arquivo do sistema local. Clique aqui para baixar o arquivo que você pode escolher para enviar.
  4. Insira o nome da tabela como user_details . Não escolha nenhum outro nome. É necessário para a validação do laboratório.
  5. Mantenha as opções fornecidas como estão.
  6. Clique na caixa de seleção para detectar automaticamente o esquema.

8. Clique na tabela “user_details” que acabamos de criar.

9. Você poderá ver a tabela que criou.

10. Você pode ver o esquema conforme mostrado.

Consultando os dados:

  1. Clique em Compor nova consulta .

selecione o nome de usuário em `<project_id> .whizlabs_bq_dataset.user_details` onde idade> 32

3. Clique em Executar para acionar a consulta.

4. Você pode ver a saída na seção de resultados da consulta.

Conclusão e conclusão:

  1. Neste laboratório, você criou um conjunto de dados do BigQuery.
  2. Você criou uma tabela e carregou dados por meio de um CSV externo.
  3. Você leu os dados da tabela usando o SQL Query.

Suggested posts

Fundamentos de Tecnologia Avançada.

Fundamentos de Tecnologia Avançada.

O campo da tecnologia cresceu aos trancos e barrancos nos últimos anos e um dos desenvolvimentos mais empolgantes é o surgimento da Inteligência Artificial (IA) e sua prole, a IA generativa. Mas o que exatamente há nessas tecnologias de ponta que as tornam tão avançadas? Hoje, vamos dar uma olhada em alguns fundamentos tecnológicos básicos que fundamentam essas inovações.

Gere códigos de resgate sem esforço em grande escala com o BigQuery

Geração de milhões de códigos de resgate exclusivos com o BigQuery: um guia passo a passo

Gere códigos de resgate sem esforço em grande escala com o BigQuery

Os códigos de resgate evoluíram para um elemento essencial das estratégias de marketing atuais. Eles permitem que as empresas ofereçam promoções, descontos e recompensas a seus clientes, resultando em maior engajamento e vendas.

Related posts

Rastreie qualquer pessoa com apenas um número de telefone | Investigação OSINT

Rastreie qualquer pessoa com apenas um número de telefone | Investigação OSINT

Você pode ser um investigador OSINT, jogador CTF ou simplesmente alguém que está recebendo chamadas de spam. Alguém que está tentando verificar o número que você viu em um anúncio.

A arte é sempre apolítica?

A arte é sempre apolítica?

Ontem, fechamos a porta do Festival Eurovisão da Canção deste ano com uma brilhante e caótica grand finale, onde a cantora sueca Loreen levou para casa o troféu, tornando-se a primeira mulher a vencer duas vezes e trazendo a coroa de volta para a Suécia 50 anos depois que o ABBA venceu a competição com “Waterloo”. Eles se tornaram um dos maiores artistas do cânone da música pop.

pronomes são super assustadores

Isso me atinge De repente, como tantas vezes acontece É o meio do caminho tudo de novo <Não, não aquele no Pacífico, seu marrom, aquele no carnaval> Todas as manchetes em voz alta…..

Rede de TV Twitter

Rede de TV Twitter

O que é velho agora é novo de novo e o que costumava ser a coisa brilhante e brilhante agora parece opaco. Não estou falando de jeans JNCO fazendo um retorno entre os garotos legais do centro da cidade junto com outras modas do final dos anos 1990.