Introdução aos conjuntos de dados

Nesta página, você encontra uma visão geral dos conjuntos de dados no BigQuery.

Conjuntos de dados

Um conjunto de dados fica contido em um projeto específico. Os conjuntos de dados são contêineres de nível superior usados na organização e no controle de acesso a suas tabelas e visualizações. É obrigatório que uma tabela ou visualização pertença a um conjunto de dados, então crie pelo menos um desses conjuntos antes de carregar dados no BigQuery. Use o formato projectname.datasetname para qualificar totalmente um nome do conjunto de dados ao usar o GoogleSQL, ou o formato projectname:datasetname para qualificar totalmente um nome de tabela ao usar a ferramenta de linha de comando bq.

Local

Você especifica um local para armazenar os dados do BigQuery ao criar um conjunto de dados. Para conferir uma lista de locais de conjuntos de dados do BigQuery, consulte Locais do BigQuery. Depois de criar o conjunto de dados, não é possível alterar o local. No entanto, é possível copiar conjuntos de dados para locais diferentes ou mover (recriar) manualmente o conjunto de dados em uma em um local diferente.

O BigQuery processa consultas no mesmo local em que o conjunto de dados que contém as tabelas que você está consultando. O BigQuery armazena os dados no local selecionado de acordo com os Termos de serviço específicos.

Limitações

Os conjuntos de dados do BigQuery estão sujeitos às seguintes limitações:

  • O local do conjunto de dados só pode ser definido no momento da criação. Depois que um conjunto de dados é criado, o local não pode ser alterado.
  • Todas as tabelas referenciadas em uma consulta precisam ser armazenadas em conjuntos de dados no mesmo local.

  • Ao copiar uma tabela, os conjuntos de dados que contêm as tabelas de origem e de destino precisam estar no mesmo local.

  • Os conjuntos de dados de cada projeto precisam ter nomes exclusivos.

Cotas

Para mais informações sobre cotas e limites de conjuntos de dados, consulte Cotas e limites.

Retenção de dados

Uso de conjuntos de dados de tempo de deslocamento em conjunto com o período de segurança contra falhas para reter dados excluídos e modificados por um curto período caso seja necessário recuperá-los. Para mais informações, consulte Retenção de dados com tempo de deslocamento e segurança contra falhas.

Modelos de faturamento do Storage

Quando você cria um conjunto de dados, o uso do armazenamento por esse conjunto de dados é cobrado de você usando bytes lógicos como a unidade padrão de consumo. No entanto, bytes físicos podem ser usados para o faturamento. Também é possível alterar o modelo de faturamento do armazenamento de um conjunto de dados existente para usar bytes físicos.

Leva 24 horas para alterar o modelo de faturamento de um conjunto de dados. As tabelas ou partições de tabela no armazenamento de longo prazo não são redefinidas para armazenamento ativo quando você altera o modelo de faturamento de um conjunto de dados. O desempenho e a latência da consulta não são afetados pela alteração do modelo de faturamento de um conjunto de dados.

Depois de alterar o modelo de faturamento do armazenamento de um conjunto de dados, aguarde 14 dias antes de alterá-lo novamente.

Se você definir o modelo de faturamento de armazenamento para usar bytes físicos, o total de custos de armazenamento ativos cobrados incluirão os bytes usados para o tempo de deslocamento e o armazenamento com segurança contra falhas. Você pode configurar a janela de tempo no deslocamento para equilibrar os custos de armazenamento com as necessidades de retenção de dados. Para mais informações sobre como prever os custos de armazenamento, consulte Previsão do faturamento do armazenamento.

Critérios de qualificação:

O modelo de faturamento de armazenamento do conjunto de dados só estará disponível para conjuntos de dados se a organização não tiver compromissos de slot de taxa fixa localizados na mesma região do conjunto de dados. Sua organização pode registrar conjuntos de dados para o faturamento de loja física quando não há compromissos de taxa fixa localizados na mesma região do conjunto de dados.

Preços

Você não é cobrado por criar, atualizar ou excluir um conjunto de dados.

Para mais informações sobre os preços do BigQuery, consulte Preços.

Segurança

Para controlar o acesso a conjuntos de dados no BigQuery, consulte Como controlar o acesso a conjuntos de dados. Para saber mais sobre criptografia de dados, consulte Criptografia em repouso.

A seguir