Aggiungere tabelle a un job di replica

Dopo aver eseguito il deployment di un job di replica, non puoi modificarlo né aggiungere tabelle. Aggiungi invece le tabelle a un nuovo job di replica o a un job duplicato.

Opzione 1: crea un nuovo job di replica

L'aggiunta di tabelle a un nuovo job è l'approccio più semplice. Impedisce il reloading storico di tutte le tabelle e i problemi di incoerenza dei dati.

Gli svantaggi sono l'aumento del sovraccarico della gestione di più job di replica e il consumo di più risorse di calcolo, poiché ogni job viene eseguito su un cluster Dataproc temporaneo separato per impostazione predefinita. Quest'ultimo può essere attenuato in qualche misura utilizzando un cluster Dataproc statico condiviso per entrambi i job.

Per ulteriori informazioni sulla creazione di nuovi job, consulta i tutorial sulla replica.

Per ulteriori informazioni sull'utilizzo del cluster Dataproc statico in Cloud Data Fusion, consulta Eseguire una pipeline in un cluster Dataproc esistente

Opzione 2: arresta il job di replica corrente e crea un duplicato

Se duplichi il job di replica per aggiungere le tabelle, tieni presente quanto segue:

  • L'attivazione dello snapshot per il job duplicato comporta il caricamento storico di tutte le tabelle da zero. Questa opzione è consigliata se non puoi utilizzare l'opzione precedente, in cui esegui job separati.

  • La disattivazione dello snapshot per impedire il caricamento dei dati storici può comportare la perdita di dati, poiché potrebbero verificarsi eventi mancanti tra l'arresto della pipeline precedente e l'avvio della nuova. La creazione di un'intersezione per attenuare questo problema non è consigliata, in quanto può comportare anche la perdita di dati: i dati storici per le nuove tabelle non vengono replicati.

Per creare un job di replica duplicato:

  1. Interrompi la pipeline esistente.

  2. Nella pagina Job di replica, individua il job da duplicare, fai clic su e su Duplica.

  3. Attiva lo snapshot:

    1. Vai a Configura origine.
    2. Nel campo Replica i dati esistenti, seleziona Sì.

  4. Aggiungi le tabelle nella finestra Seleziona tabelle e trasformazioni e segui la procedura guidata per eseguire il deployment della pipeline di replica.

Passaggi successivi