Referência do plug-in do Cloud Data Fusion

Mais conhecidos

Descubra e acesse rapidamente os plug-ins mais usados do Cloud Data Fusion.

BigQuery
Esta fonte lê todo o conteúdo de uma tabela do BigQuery.
Várias tabelas do BigQuery
Este coletor faz gravações em várias tabelas do BigQuery. Os dados são gravados primeiro em um local temporário no Cloud Storage e, em seguida, carregados no BigQuery.
Tabela do BigQuery
Este coletor faz gravações em uma tabela do BigQuery. Os dados são gravados primeiro em um local temporário no Cloud Storage e, em seguida, carregados no BigQuery.
Cloud Storage
O plug-in de origem lê objetos de um caminho em um bucket do Cloud Storage.
Cloud Storage
Este plug-in de coletor grava registros em um ou mais arquivos de um diretório do Cloud Storage em vários formatos, como CSV, Avro, Parquet e JSON.
Várias tabelas de banco de dados
Faz leituras em várias tabelas de um banco de dados. Usado com plug-ins de vários coletores, como vários coletores do Cloud Storage e do BigQuery, para carregar dados de todo o banco de dados em um único pipeline.
MySQL
Faz leituras em uma instância do MySQL usando uma consulta SQL configurável. Gera um registro para cada linha retornada pela consulta.
Oracle
Faz leituras em uma tabela do Oracle usando uma consulta SQL configurável. Gera um registro para cada linha retornada pela consulta.
Salesforce
Esta fonte lê em lote sObjects como oportunidades, contatos, contas, leads, objetos personalizados etc. do Salesforce.
ODP do SAP
Conecta-se a uma fonte SAP para extração de dados baseada em lote e em delta por meio do provisionamento de dados operacionais (ODP).
SQL Server
Faz leituras em um SQL Server usando uma consulta SQL configurável. Gera um registro para cada linha retornada pela consulta.

Google Cloud

Confira todos os plug-ins disponíveis para produtos do Google Cloud, incluindo o Cloud Storage, o BigQuery, o Cloud Bigtable, o Cloud Datastore, o Pub/Sub e o Google Workspace.

Agregar

Plug-ins para agregar funções como média, contagem, contagem(*), primeiro, último, máximo, mínimo, soma, coleta, incluindo junções de tabelas etc.

Alertas

Plug-ins para alertas.

Apache

Plug-ins para o Apache.

APIs

Plug-ins para várias APIs.

Avro

Plug-ins para o Avro.

AWS

Plug-ins disponíveis para a AWS.

Limpeza

Plug-ins para liberação de memória.

Cloud Storage

Plug-ins disponíveis para o Cloud Storage.

Código

Plug-ins para executar seu próprio código.

Compactação

Plug-ins para compactação.

Condicional

Os pipelines também oferecem plug-ins de fluxo de controle como condições. Os plug-ins de condição permitem ramificar o pipeline em dois caminhos separados, de acordo com a avaliação verdadeira ou falsa do predicado de condição especificado.

Fluxo de controle

Plug-ins para o fluxo de controle.

CRM

Plug-ins para plataformas de CRM, como o Salesforce.

CSV

Plug-ins para CSV.

Banco de dados

Plug-ins para bancos de dados.

Data Warehouse

Plug-ins para data warehouse.

DLP

Plug-ins para o Cloud Data Loss Prevention (DLP).

Dinâmico

Plug-ins dinâmicos.

E-mail

Plug-ins para e-mail.

Arquivo

Plug-ins de arquivos.

Filtro

Plug-ins de filtro.

FTP

Plug-ins de FTP.

Google Analytics 360

Plug-ins para o Google Analytics 360.

Google Workspace

Plug-ins para o Google Workspace, incluindo o Planilhas Google e o Google Drive.

Hadoop

Plug-ins para o Hadoop.

HDFS

Plug-ins para o HDFS.

HTTP

Plug-ins para HTTP.

Definidor de argumentos
Executa uma solicitação HTTP para buscar argumentos a serem definidos no pipeline.

IBM

Plug-ins para a IBM.

JDBC

Plug-ins para o JDBC.

JSON

Plug-ins para JSON.

Kafka

Plug-ins para o Kafka.

Registros

Plug-ins para registros.

Analisador de registro do servidor da Web
Analisa registros de qualquer fonte de entrada em busca de informações relevantes, como URI, IP, navegador, dispositivo, código de status HTTP e carimbo de data/hora.

Mapeamento

Plug-ins para mapeamento.

Mascaramento

Plug-ins para mascaramento.

Microsoft

Plug-ins para Microsoft Excel e Windows.

Microsoft Azure

Plug-ins para data warehouses do Microsoft Azure, além de bancos de dados, armazenamentos em nuvem e muito mais.

Aninhado

Plug-ins para dados aninhados.

Registro simplificado
Plug-in para transformar dados aninhados em dados simples.

NoSQL

Plug-ins para NoSQL.

Oracle

Plug-ins para o Oracle.

Parquet

Plug-ins para Parquet.

Python

Plug-ins para Python.

S3

Plug-ins para S3.

Amazon S3
Esta fonte é usada sempre que você precisar fazer leituras no Amazon S3.

SAP

SaaS

Plug-ins para produtos SaaS comuns, como Salesforce, ServiceNow e Zendesk.

Pesquisar

Plug-ins para pesquisa.

Snowflake

Plug-ins para o Snowflake.

Spark

Plug-ins para o Spark.

SSH

Plug-ins para SSH.

Estatísticas

Plug-ins para estatísticas.

Streaming

Plug-ins para produtos de streaming.

Teste

Plug-ins para testes.

Lixeira
A lixeira consome todos os registros na entrada e os exclui, o que significa que nenhuma saída é gerada nem armazenada em lugar algum.

Plug-ins do Cloud Data Fusion

Filtros