O que é o BigQuery?

O BigQuery é um armazenamento de dados corporativo totalmente gerenciado que ajuda a gerenciar e analisar dados com recursos integrados, como machine learning, análise geoespacial e business intelligence. A arquitetura sem servidor do BigQuery permite usar consultas SQL para responder às maiores perguntas da organização sem precisar gerenciar a infraestrutura. O mecanismo de análise distribuída e escalonável do BigQuery permite consultar terabytes em segundos e petabytes em minutos.

O BigQuery maximiza a flexibilidade separando o mecanismo de computação que analisa seus dados das suas opções de armazenamento. Armazene e analise seus dados no BigQuery ou use o BigQuery para avaliar seus dados onde eles estão. As consultas federadas permitem que você leia dados de fontes externas enquanto o streaming é compatível com atualizações contínuas de dados. Ferramentas avançadas como o BigQuery ML e o BI Engine permitem analisar e entender esses dados.

As interfaces do BigQuery incluem a interface do Console do Google Cloud e a ferramenta de linha de comando do BigQuery. Desenvolvedores e cientistas de dados podem usar bibliotecas de cliente com uma programação familiar, incluindo Python, Java, JavaScript e Go, além da API REST e da API RPC do BigQuery para transformar e gerenciar dados. Os drivers ODBC e JDBC fornecem interação com aplicativos atuais, incluindo ferramentas e utilitários de terceiros.

Como analista de dados, engenheiro de dados, administrador de armazenamento de dados ou cientista de dados, a documentação do BigQuery ML ajuda você a descobrir, implementar e gerenciar ferramentas de dados para informar decisões críticas de negócios.

Primeiros passos com o BigQuery

Comece a explorar o BigQuery em minutos. Aproveite o nível de uso gratuito do BigQuery ou o Sandbox sem custo para começar a carregar e consultar dados.

  1. Sandbox do BigQuery: dê os primeiros passos no sandbox do BigQuery, sem riscos e sem custo.
  2. Guia de início rápido do Console do Cloud: conheça os recursos do Console do BigQuery.
  3. Conjuntos de dados públicos: veja o desempenho do BigQuery com dados grandes e reais do Programa de conjuntos de dados públicos.

Explorar o BigQuery

A infraestrutura sem servidor do BigQuery permite que você se concentre nos dados em vez de gerenciar recursos. O BigQuery combina um armazenamento de dados baseado na nuvem e ferramentas analíticas avançadas.

armazenamento do BigQuery;

O BigQuery armazena dados usando um formato de armazenamento em colunas otimizado para consultas analíticas. O BigQuery apresenta dados em tabelas, linhas e colunas e fornece suporte completo à semântica de transações de banco de dados (ACID). O armazenamento do BigQuery é replicado automaticamente em vários locais para proporcionar alta disponibilidade.

Para mais informações, consulte Visão geral do armazenamento do BigQuery e BigQuery para usuários de armazenamento de dados.

Análise do BigQuery

Os usos de análise descritiva e prescritiva incluem business intelligence, análise ad-hoc e machine learning. É possível consultar dados armazenados no BigQuery ou executar consultas em dados onde eles residem usando tabelas externas ou consultas federadas, incluindo o Google Cloud Storage, Bigtable, Spanner ou Planilhas Google armazenados no Google Drive.

Gerenciamento do BigQuery

O BigQuery fornece gerenciamento centralizado de recursos de dados e computação protegidos com o gerenciamento de identidade e acesso (IAM), o modelo de acesso usado no Google Cloud. As práticas recomendadas de segurança do Google Cloud fornecem uma abordagem sólida e flexível que pode incluir segurança de perímetro tradicional ou uma abordagem de defesa em profundidade mais complexa e granular.

  • A introdução à segurança e à governança de dados ajuda a entender a governança de dados e quais controles são necessários para proteger os recursos do BigQuery.
  • Jobs são ações que o BigQuery executa em seu nome para carregar, exportar, consultar ou copiar dados.
  • As reservas permitem alternar entre preços sob demanda e taxa fixa.

Recursos do BigQuery

Explore os recursos do BigQuery:

APIs, ferramentas e referências

Materiais de referência para desenvolvedores e analistas do BigQuery:

Papéis e recursos do BigQuery

O BigQuery atende às necessidades dos profissionais de dados com relação aos seguintes papéis e responsabilidades.

Analista de dados

Orientação da tarefa para ajudar se você precisar fazer o seguinte:

Administrador de dados

Orientação da tarefa para ajudar se você precisar fazer o seguinte:

Cientista de dados

Orientação da tarefa para ajudar se você precisar usar o machine learning do BigQuery ML para fazer o seguinte:

Desenvolvedor de dados

Orientação da tarefa para ajudar se você precisar fazer o seguinte:

Tutoriais em vídeo do BigQuery

A série de tutoriais em vídeo a seguir ajudará você a começar a usar o BigQuery:

Nome

Descrição

O que é o BigQuery? (4:39) Uma visão geral do BigQuery sobre como o BigQuery foi projetado para ingerir e armazenar grandes quantidades de dados para ajudar analistas e desenvolvedores
Como usar o sandbox do BigQuery (3:05) Como configurar um sandbox do BigQuery para executar consultas sem precisar de um cartão de crédito
Como fazer perguntas, executar consultas (5:11) Como escrever e executar consultas SQL na IU do BigQuery, além de escolher um número de jersey vencedor
Como carregar dados no BigQuery (5:31) Como ingerir e analisar dados em tempo real ou apenas em uma análise única de dados, além de gatos em comparação a cães
Como visualizar resultados de consulta (5:38) Como a visualização de dados é útil para facilitar a compreensão e a internação de conjuntos de dados complexos
Como gerenciar o acesso com o IAM (5:23) Como permitir que outros usuários consultem seus conjuntos de dados no BigQuery com permissões do IAM e controle de acesso
Como salvar e compartilhar consultas (6:17) Como salvar e compartilhar suas consultas no BigQuery sem complicações
Como proteger dados confidenciais com visualizações autorizadas (7:12) Como compartilhar conjuntos de dados com diferentes usuários facilmente ao configurar controles de acesso personalizados
Como consultar dados externos com o BigQuery (5:49) Como configurar uma fonte de dados externa no BigQuery e consultar dados do Cloud Storage, Cloud SQL, Google Drive e muito mais
O que são funções definidas pelo usuário? (4:59) Como criar funções definidas pelo usuário (UDFs) para analisar conjuntos de dados no BigQuery