Gestiona la administración de Studio

En esta página se explican las capacidades de administración que Cloud Data Fusion Studio ofrece la posibilidad de administrar configuraciones. Cloud Data Fusion sigue una jerarquía en la que cada instancia puede tener varios espacios de nombres. Desde Cloud Data Fusion Studio, los administradores pueden administrar de forma centralizada todos los espacios de nombres o individualmente. Cloud Data Fusion Studio proporciona el siguiente sistema y espacio de nombres controles de seguridad.

Administración del sistema

Si haces clic en Administrador del sistema en Cloud Data Fusion Studio, se mostrarán las siguientes pestañas:

  • La pestaña Administración: Consulta el estado del servicio de varios servicios de Cloud Data Fusion. También puedes ver los registros de cada uno de los servicios.

  • La pestaña Configuración: Crea, visualiza y edita los siguientes controles:

Los aprovisionadores son responsables de crear, inicializar y destruir la en el que se ejecutan las canalizaciones. Cada aprovisionador expone parámetros de configuración que se usan para controlar qué tipo de clúster se crea y borrarse. Los distintos aprovisionadores crean diferentes tipos de clústeres.

Cada perfil de procesamiento tiene un permiso: sistema o usuario. Puedes usar un sistema de procesamiento de los espacios de nombres. Existen perfiles de procesamiento de usuario de Terraform, y solo las canalizaciones en ese espacio de nombres pueden usar el perfiles.

En la pestaña Configuraciones del administrador del sistema, puedes crear un perfil de procesamiento del sistema que se aplique a todos los espacios de nombres. Cloud Data Fusion asigna un perfil de procesamiento predeterminado.

Cuando creas un perfil de procesamiento, seleccionas el aprovisionador, al que se usa para crear y configurar los detalles del entorno de ejecución de Cloud.

Preferencias del sistema

Las preferencias son parámetros de configuración predefinidos que se aplican a varios niveles Cloud Data Fusion, incluidos el sistema, los espacios de nombres y las aplicaciones (que contienen canalizaciones) y programas individuales dentro de canalizaciones. Las preferencias proporcionan una forma de establecer valores predeterminados para las configuraciones de uso general. Estos los valores predeterminados pueden ser heredados por canalizaciones y programas en niveles inferiores, lo que reduce de configuración repetitivas. Para obtener más información, consulta Cómo administrar macros, preferencias y argumentos del entorno de ejecución.

Acción de llamada HTTP

La acción de llamada HTTP en la página Administrador del sistema te permite interactuar con la propia API de Cloud Data Fusion, o posiblemente con otras APIs de servicios de Google Cloud, directamente desde la interfaz de Studio de Cloud Data Fusion. Sin embargo, para creando canalizaciones de procesamiento de datos con fuentes de datos externas, en su lugar, usa el y su Ejecutor de llamadas HTTP en tus canalizaciones para obtener solución integral. Difiere ligeramente de la acción de llamada HTTP, pero los conceptos subyacentes son similares.

Configuraciones y casos de uso

La acción de llamada HTTP se usa principalmente para tareas administrativas o configuración en Cloud Data Fusion. Te permite interactuar con la API de Cloud Data Fusion o con otros servicios de Google Cloud que exponen una API de HTTP, directamente desde Studio de Cloud Data Fusion.

Configuraciones

Puedes definir los siguientes detalles para una llamada HTTP:

  • URL: Es el extremo de destino del servicio web al que deseas llamar.
  • Method: Es el método HTTP para usar, como GET. POST o PUT.
  • Opcional: Encabezados: cualquier encabezado personalizado necesario para el para cada solicitud.
  • Opcional: Cuerpo: Datos que se enviarán en el cuerpo de la solicitud, como el para las llamadas POST y PUT.

Luego, puedes ejecutar la llamada HTTP definida y ver la respuesta del servicio web en Cloud Data Fusion Studio.

Casos de uso
  • Probar las llamadas a la API de Cloud Data Fusion Puedes usar la función de llamada acción para probar o explorar las funcionalidades de la API de Cloud Data Fusion directamente desde la interfaz web. Esta acción puede ser útil para comprender el comportamiento de la API o solucionar posibles problemas.
  • Administra los espacios de nombres (avanzado). Si bien hay una IU dedicada para la administración de espacios de nombres, la acción de llamada HTTP se puede usar para tareas avanzadas realizando llamadas directamente a la API de Cloud Data Fusion para la creación, eliminación o configuración de espacios de nombres.
  • Interactuar con otros servicios de Google Cloud (limitado). Si otros servicios de Google Cloud que usas tienen un plan API de HTTP, puedes usar la acción de llamada de HTTP para interactuar con esos servicios, aunque este es un caso de uso poco común.
Consideraciones importantes
  • Seguridad: Ten cuidado cuando uses la acción de llamada HTTP, especialmente con datos sensibles o llamadas a la API de Cloud Data Fusion que podrían afectar tu entorno. Asegúrate de comprender las implicaciones de cada llamada a la API antes de ejecutarla.
  • Limitaciones: La acción de llamada HTTP se usa principalmente para tareas administrativas y pruebas. No está diseñado para compilar canalizaciones de procesamiento de datos complejas que impliquen la manipulación de datos dentro de Cloud Data Fusion.
  • Alternativa para canalizaciones: Para integrar fuentes de datos o servicios externos en tus canalizaciones de datos, usa el complemento HTTP y su ejecutor de llamadas HTTP asociado dentro de tus definiciones de canalización. Esto proporciona una forma más sólida y controlada de administrar las interacciones HTTP dentro de tus flujos de trabajo de procesamiento de datos.

Administración del espacio de nombres

Si haces clic en Administrador de espacios de nombres en Cloud Data Fusion Studio, podrás administrar los parámetros de configuración del espacio de nombres específico. Para cada espacio de nombres, puede definir los siguientes aspectos:

  • Perfiles de procesamiento: Los perfiles configurados en Administrador de espacios de nombres son de usuario. de Google Cloud. Solo las canalizaciones en ese espacio de nombres pueden usar estos de Google Cloud. Para obtener más información, consulta Administra perfiles de procesamiento.
  • Preferencias: Las preferencias definidas a nivel del espacio de nombres se aplican al espacio de nombres, a las aplicaciones (que contienen canalización) y a los programas individuales dentro de las canalizaciones. Para obtener más información, consulta Cómo administrar macros, preferencias y argumentos del entorno de ejecución.
  • Conexiones: Cloud Data Fusion permite reutilizar conexiones para de fuentes y receptores en las canalizaciones de datos. Puedes agregar conexiones en la Página de administrador de espacios de nombres. Para obtener más información, consulta Crea y administra conexiones.
  • Controladores: Algunos complementos de Cloud Data Fusion requieren que se agregue un controlador de JDBC al espacio de nombres. Por ejemplo, antes de que puedas ejecutar una canalización con un complemento de origen por lotes de MySQL, debes agregar el controlador de MySQL compatible al espacio de nombres. Puedes subir o quitar controladores de JDBC a un espacio de nombres desde desde la Página de administrador de espacios de nombres, o directamente desde Hub. Para obtener más información, consulta Controladores de complementos
  • Administración del control de fuente: Permite administrar de forma eficaz el proceso de desarrollo. de canalizaciones implementadas, Source Control Management permite conectar un con el repositorio de tu sistema de control de fuente. Para obtener más información, consulta Administra canalizaciones con la administración de control de código fuente.
  • Cuenta de servicio: Para controlar el acceso a los recursos de Google Cloud, los espacios de nombres de Cloud Data Fusion usan el Agente de servicio de la API de Cloud Data Fusion de forma predeterminada.

Para lograr un mejor aislamiento de datos, puedes asociar una cuenta de servicio de Identity and Access Management (IAM) personalizada (conocida como cuenta de servicio por espacio de nombres) con cada espacio de nombres. La cuenta de servicio de IAM personalizada, que puede ser diferente para diferentes espacios de nombres, te permite controlar el acceso a los recursos de Google Cloud entre espacios de nombres para las operaciones de tiempo de diseño de la canalización en Cloud Data Fusion, como la vista previa de la canalización, Wrangler y la validación de la canalización. Para obtener más información, consulta Control de acceso con una cuenta de servicio de espacio de nombres.

¿Qué sigue?