Como gerenciar conexões

Nesta página, descrevemos como criar e gerenciar conexões nas versões 6.5 e posteriores do Cloud Data Fusion. Uma conexão armazena dados confidenciais, como credenciais de usuário e informações do host, necessárias para se conectar a fontes de dados.

O Cloud Data Fusion versão 6.5 melhora a experiência de conexão ao:

  • Permitir que administradores criem, dupliquem, importem, exportem e excluam conexões do Studio Studio, do Wrangler ou da Administrador de namespace.
  • Permitir que os desenvolvedores usem e reutilizem conexões criadas pelos administradores nos pipelines de dados.

Nas versões anteriores ao Cloud Data Fusion 6.5, você cria conexões quando cria um pipeline. Os cientistas de dados e os desenvolvedores de ETL fornecem credenciais (como IP de conexão, porta e senha) sempre que criam um pipeline. Nas versões 6.5 e posteriores, os administradores podem criar e gerenciar as conexões dos pipelines do Cloud Data Fusion, e os desenvolvedores podem usar essas conexões sem precisar fornecer credenciais.

Antes de começar

Crie ou faça upgrade da instância do Cloud Data Fusion para a versão 6.5 ou posterior.

Você precisa do papel de administrador do Cloud Data Fusion.

Como criar uma conexão

Se você for um administrador, siga estas etapas para criar uma conexão reutilizável que sua equipe pode usar nos pipelines.

  1. Na IU do Cloud Data Fusion, clique no ícone de menu no canto superior esquerdo.

  2. Na parte inferior do menu, clique em Administrador do Namespace.

  3. Clique na guia Conexões.

  4. Clique em Adicionar conexão.

  5. Clique no tipo de conexão que você quer criar. Por exemplo, GCS.

  6. Configure as propriedades da conexão.

  7. Clique em Testar conexão.

  8. Quando a mensagem de conclusão aparecer, clique em Criar.

Usando o menu de três pontos, é possível exportar ou duplicar qualquer conexão que você tiver criado.

Como usar uma conexão em um plug-in

Quando você usa uma conexão em um plug-in, o plug-in herda todas as propriedades configuradas quando a conexão foi criada. Para usar uma conexão em um dos plug-ins compatíveis, siga estas etapas:

  1. No Pipeline do Studio, abra um pipeline atual.

  2. Em Origem, clique no plug-in de origem para usar uma conexão. As conexões estão disponíveis somente para estes plug-ins de origem em lote:

    • BigQuery
    • Cloud Storage
    • Kafka
    • Amazon S3
    • Cloud Spanner
  3. Coloque o ponteiro sobre o nó de origem que aparece e clique em Propriedades.

  4. Defina Usar conexão como Sim.

  5. Clique em Browse Connections. É possível selecionar uma conexão atual ou criar uma nova. Depois que você selecionar a conexão, todas as propriedades associadas à conexão não aparecerão mais. As propriedades de conexão são armazenadas na conexão.

  6. Configure o restante das propriedades de plug-in necessárias.

  7. Clique em Validate (Validar).

  8. Clique no botão X no canto superior direito da caixa de diálogo.

  9. Continue a criar o pipeline no Pipeline Studio.

Como importar uma conexão

Para importar uma conexão, siga estas etapas:

  1. Na página Administrador de namespace, clique em Conexões.

  2. Clique em Importar.

  3. Navegue até o arquivo JSON que você quer importar.

  4. Insira um nome para a conexão e preencha as outras propriedades.

Como exportar uma conexão

A exportação é útil se você quiser compartilhar a conexão com outros membros da equipe, adicioná-la ao controle de versões ou implantá-la em um ambiente de desenvolvimento ou de produção.

Para exportar uma conexão, siga estas etapas:

  1. Na página Administrador de namespace, clique em Conexões.

  2. Localize a conexão que você quer exportar.

  3. Na página Administrador de namespace, clique nos três pontos e em Exportar. O Cloud Data Fusion exporta as propriedades de conexão para um arquivo JSON.

A seguir