Conheça nossas inovações mais recentes em bancos de dados, análises e IA no Data Cloud Summit. Ao vivo e sob demanda a partir de 26 de maio.

Dataprep by Trifacta

Um serviço inteligente de dados na nuvem para exploração visual, limpeza e preparação de dados para análise e machine learning.

Veja a documentação do produto.

Há um ícone do Dataprep em frente a um laptop aberto. À esquerda do laptop, há uma planilha com o logotipo da Trifacta, há uma pilha de páginas da Web à direita e atrás do laptop há um gráfico de barras dentro de uma nuvem

Preparação de dados inteligente

O Dataprep by Trifacta é um serviço de dados inteligente que permite a exploração visual, a limpeza e a preparação de dados estruturados e não estruturados para análise, geração de relatórios e machine learning. Como o Dataprep é sem servidor e funciona em qualquer escala, não há infraestrutura para implantar ou gerenciar. Sua próxima transformação ideal de dados é sugerida e prevista com cada entrada na IU, sendo assim, não é necessário escrever códigos.

O que há de novo

Monitor de computador com dados na tela dele

Simplicidade sem servidor

O Dataprep é um serviço integrado de parceiros operado pela Trifacta e baseado na solução de preparação de dados da empresa que é líder do setor. O Google trabalha com a Trifacta para proporcionar uma experiência inigualável ao usuário, que elimina a necessidade de instalação antecipada de software, gastos extras com licenciamento ou sobrecarga operacional contínua. O Dataprep é totalmente gerenciado e pode ser escalonado de acordo com a demanda para atender às suas necessidades cada vez maiores de preparação de dados. Assim, você se concentra na análise.

Gráfico estilizado com um ícone de cronômetro

Rapidez na exploração e detecção de anomalias

Entenda e explore os dados rapidamente por meio de distribuições. O Dataprep detecta automaticamente esquemas, tipos de dados, possíveis junções e anomalias, como valores ausentes, outliers e elementos duplicados para que você pule a demorada etapa de avaliação da qualidade de seus dados e se concentre na exploração e análise.

Um documento com texto e marcas de seleção azuis saindo de uma caixa de papelão à direita. À esquerda está o ícone do Dataprep

Facilidade e eficiência na preparação de dados

A cada ação que você realiza na IU, o Dataprep sugere e prevê automaticamente a próxima transformação ideal de dados. Depois que você define a sequência de transformações, o Dataprep usa o BigQuery como base, permitindo processar conjuntos de dados estruturados e não estruturados de qualquer tamanho com apenas alguns cliques, sem precisar escrever nenhum código.

Recursos do Dataprep

Edições para iniciantes, Professional e Enterprise

Transformação preditiva

O Dataprep usa um algoritmo de inferência reservado para interpretar a intent de transformação dos dados da seleção de um usuário. Um conjunto classificado de sugestões e padrões das seleções de correspondência é gerado automaticamente.

Transformações avançadas

Aproveite centenas de funções que transformam seus dados no recurso que quiser. Com um clique do mouse, aplique agregação, pivot, unpivot, junções, união, extração, cálculo, comparação, condição, mesclagem, expressões regulares e muito mais.

Capacidade de processamento otimizada

O Dataprep seleciona automaticamente o melhor mecanismo de processamento do Google Cloud subjacente para transformar os dados o mais rápido possível. Com base na localidade e volume de dados, o Dataprep aproveita o BigQuery (transformações ELT no local) para preparar os dados, o Dataflow ou para o pequeno volume, o mecanismo na memória do Dataprep.

Criação de perfis ativos

Veja e explore seus dados por meio de distribuições visuais interativas que auxiliam na descoberta, limpeza e transformação. As representações visuais ajudam a interpretar grandes volumes de dados, e as técnicas inovadoras de criação de perfis do Dataprep permitem a exibição das principais informações estatísticas em um formato dinâmico e fácil de usar.

Regras de qualidade dos dados

As regras de qualidade sugerem indicadores de qualidade para monitorar e corrigir a precisão, a integridade, a consistência, a validade e a exclusividade dos dados, garantindo que você tenha uma visão abrangente da limpeza dos dados.

Colaboração

Em um ambiente de equipe, pode ser útil ter vários usuários trabalhando nos mesmos recursos ou criar cópias de trabalhos de boa qualidade que funcionem como modelos para outras pessoas. O Dataprep permite que os usuários colaborem nos mesmos objetos de fluxo em tempo real ou criem cópias para outros usarem em trabalhos independentes.

Conectividade abrangente

Além do conectividade padrão do BigQuery, Cloud Storage, Microsoft Excel e Planilhas Google, aprimore sua análise de autoatendimento com centenas de fontes de dados, como Salesforce, Oracle, Microsoft SQL Server, MySQL e PostgreSQL, entre outros.

Orquestração de pipeline de dados

Programe e automatize os jobs de preparação de dados encadeando-os em ordem sequencial e condicional. Alerte os usuários sobre o sucesso ou a falha e a acione tarefas externas (como o Cloud Functions). Aproveite as APIs abrangentes para integrar o Cloud Dataprep como parte da solução completa de uma empresa.

Operacionalização em escala empresarial

Adote uma prática de implantação contínua com importação/exportação de receitas em edições e versões, parâmetros de fluxo, configuração personalizada para ajuste de desempenho do Google Dataflow e APIs avançadas para automatizar o ciclo de vida de desenvolvimento de software e o monitoramento.

Tipos de dados comuns

Transforme conjuntos de dados estruturados ou não estruturados, armazenados nos formatos CSV, JSON, tabelas de tabelas relacionais ou dados de aplicativos de SaaS de qualquer tamanho (de megabytes a petabytes) com a mesma facilidade e simplicidade.

Correspondência de padrões

Utilize correspondência colunar de padrões para identificar os padrões de dados relevantes e evidenciá-los na interface a fim de usá-los na criação dos roteiros. Além disso, durante as etapas de criação, é possível aplicar expressões regulares ou padrões do Dataprep para localizar padrões e transformar os dados correspondentes nos seus conjuntos.

Padronização

Agrupe valores por semelhanças com base na ortografia ou na pronúncia, seja qual for o idioma, e crie clusters padronizados de valores consistentes.

Amostragem

Para otimizar o desempenho, o Dataprep gera automaticamente uma ou mais amostras de dados para exibição e manipulação no aplicativo cliente. No entanto, é possível alterar facilmente o tamanho, o escopo e o método usado para a criação dessas amostras.

Segurança avançada

Expanda os padrões de segurança atuais fornecendo controle de acesso a dados individuais usando uma combinação de papéis de IAM do Google e o BigQuery, o Cloud Storage e os direitos de acesso do Planilhas Google para determinar o acesso.

Arquitetura de pipeline do Dataprep ELT

À esquerda, a coluna "Ingestão" contém dados brutos no BigQuery, Cloud Storage, Planilhas Google, Excel, bancos de dados, aplicativos e uploads de arquivos. Uma seta aponta para a direita, onde está a coluna "Preparação e armazenamento". Essa linha passa pelo Cloud Dataprep e Dataflow até chegar numa parte que mostra que os dados são refinados no BigQuery e no Cloud Storage Abaixo dessa coluna, está a seção "Governança e Automação", que mostra os itens Data Catalog, Cloud Functions e Cloud Composer. A linha continua indo para a direita até a coluna "Análise e ML". Nela, são exibidos os ícones do BigQueryML, Looker, Google Data Studio, serviços de BI para parceiros (logotipo da Qlik) e Cloud AI Platform

Com o Dataprep, é possível explorar rapidamente novos conjuntos de dados, e, graças à flexibilidade desse serviço, ele atende a todas as nossas necessidades de transformação de dados. A preparação de dados na Merkle é concluída em questão de minutos, não horas ou dias, o que acelera em 90% o tempo dedicado a esse processo.

Henry Culver, arquiteto de TI da Merkle

Nossos clientes

Recursos

Preços

O Dataprep é um aplicativo da Web interativo em que os usuários podem definir as regras de preparação de dados por meio da interação com uma amostra. Para a execução do fluxo no conjunto de dados completo, ele pode ser executado como um job do Dataprep (usando o Dataflow).  O preço é dividido em duas variáveis.: design e execução. O preço é calculado por projeto para um número ilimitado de usuários. O preço de execução consiste no uso do Dataflow para executar jobs no Dataprep. Saiba mais e veja todos os detalhes na nossa página de preços no Google Cloud Marketplace. 

Próximos passos

Comece a criar no Google Cloud com US$ 300 em créditos e mais de 20 produtos do programa Sempre gratuito.

Precisa de ajuda para começar?
Trabalhe com um parceiro confiável
Continue navegando