Prácticas recomendadas generales para usar Datastream

En esta página, encontrarás las prácticas recomendadas para usar Datastream. Estas incluyen prácticas recomendadas generales para usar Datastream.

Cambia la base de datos de origen de una transmisión

En algunos casos, es posible que debas cambiar la base de datos de origen de una transmisión. Por ejemplo, es posible que debas modificar la transmisión para replicarla desde una réplica en lugar de la instancia de la base de datos principal.

1. Crea un perfil de conexión para la instancia de réplica.
2. Crea una transmisión con el perfil de conexión de la réplica que creaste y el perfil de conexión existente para el destino.
3. Inicia la transmisión con el reabastecimiento histórico inhabilitado. Cuando se inicie la transmisión, solo traerá los datos de los registros binarios.
4. Opcional. Después de ejecutar la transmisión, modifícala para habilitar el reabastecimiento automático.

5. Pausa la transmisión que está leyendo desde la instancia principal.

   No tienes que detener el trabajo de Dataflow, cambiar las notificaciones de Pub/Sub ni modificar los conjuntos de datos en BigQuery.

6. Opcional. Borra la transmisión que estaba transmitiendo datos desde la instancia principal.

7. Opcional. Borra el perfil de conexión de la instancia principal.

Alerta y supervisión en Datastream

El panel de Datastream contiene mucha información. Esta información puede ser útil para fines de depuración. Puedes encontrar información adicional en los registros, que están disponibles en Cloud Logging.

Usa Google Cloud Monitoring para crear un panel personalizado que se adapte a las necesidades de tu empresa.

Alertas de Datastream

No hay alertas predeterminadas configuradas para Datastream. Por ejemplo, puedes crear una política de alertas para la métrica Actualización de datos haciendo clic en el vínculo Crear política de alertas en la pestaña Descripción general. Para las métricas restantes, sigue estos pasos:

1. En la consola de Google Cloud, ve a la página  Alertas:

   Ve a Alertas.

2. Haz clic en Crear política.

3. Haz clic en el menú desplegable Seleccionar una métrica.

4. En el campo de filtro, ingresa Datastream.

5. Opcional: Es posible que debas inhabilitar el filtro Activo para ver todas las métricas disponibles.

6. Busca la métrica que deseas supervisar en Transmisión de Datastream.

7. Haz clic en Aplicar.

8. Opcional: Ingresa los detalles requeridos en las secciones Agregar filtros y Transformar datos. Haz clic en Siguiente.

9. Ingresa la información requerida en la sección Configurar activador de alertas. Haz clic en Siguiente.

10. Configura tus notificaciones en la sección Configura las notificaciones y finaliza la alerta.

11. Revisa tu alerta y haz clic en Crear política cuando tengas todo listo.

    Para obtener información detallada sobre cómo completar cada uno de estos pasos, consulta Crea una política de alertas.

Recomendamos crear alertas para las siguientes métricas de Datastream:

• Actualidad de los datos
• Recuento de eventos de transmisión no admitidos
• Latencias totales de transmisión

Una alerta sobre cualquiera de estas métricas puede indicar un problema con la transmisión o la base de datos de origen.

¿Cuántas tablas puede manejar una sola transmisión?

Recomendamos que una sola transmisión incluya hasta 10,000 tablas. No hay límite para el tamaño de las tablas. Si necesitas crear una transmisión con más tablas, es posible que la transmisión ingrese en un estado de error. Para evitar esto, considera dividir la fuente en varias transmisiones.

Ten en cuenta el impacto en la base de datos de origen. Cada transmisión tendrá su propio límite en la cantidad de conexiones y tareas simultáneas, por lo que combinar varias transmisiones podría sobrecargar la base de datos.