資料倉儲遷移總覽

總覽

將 BigQuery 資料移轉服務與特殊遷移代理程式搭配使用,您就能把內部部署資料倉儲系統中的資料複製到 BigQuery。本文件針對遷移程序提供總覽。

如要使用 BigQuery 資料移轉服務進行資料倉儲遷移作業,請先下載連線至本機資料倉儲的內部部署代理程式。接下來,您就能在 BigQuery 資料移轉服務中設定轉移作業。內部部署的代理程式會與 BigQuery 資料移轉服務通訊,以便將資料倉儲中的資料表複製到 BigQuery。您可以透過 BigQuery 資料移轉服務的網路 UI,監控將資料從資料倉儲載入 BigQuery 的週期性資料載入工作。

下圖顯示資料倉儲與 BigQuery 之間的整體資料流動情況。

位置注意事項

  • 將多個 Cloud Storage 值區並置於相同位置,以利載入資料。
    • 如果您的 BigQuery 資料集位於多地區位置,則含有載入資料的 Cloud Storage 值區必須位於相同位置的地區值區或多地區值區。舉例來說,如果您的 BigQuery 資料集是位在歐盟,則 Cloud Storage 值區就必須位於歐盟的地區值區或多地區值區。
    • 如果您的資料集是位在地區位置,則您的 Cloud Storage 值區必須是相同位置的地區值區。舉例來說,如果您的資料集是位在東京地區,則您的 Cloud Storage 值區必須是位在東京的地區值區。
    • 例外情況:如果您的資料集是位在美國的多地區位置,則您可以從任何單一地區或多地區位置的 Cloud Storage 值區載入資料。

    規定與限制

    • 只會遷移資料表。不支援已儲存的查詢、檢視畫面、使用者定義的函式、內儲程序等其他資料庫資源。
    • 系統會將資料擷取至本機檔案系統的資料夾 (內部部署環境)。請務必確認有足夠的可用空間來存放資料。
    • 從資料倉儲擷取的資料未經加密。請採取適當步驟來限制對本機資料夾中擷取檔案的存取權,並確認 Cloud Storage 值區受到妥善保護。
    • 擷取作業的速度會受到 JDBC 連線的限制。

    配額與限制

    適用於資料倉儲遷移作業的 BigQuery 資料移轉服務使用載入工作,將資料倉儲中的資料載入 BigQuery。從資料倉儲擷取的每個資料表都會透過載入工作分別載入 BigQuery。載入工作適用 BigQuery 的所有配額與限制

    後續步驟

    本頁內容對您是否有任何幫助?請提供意見:

    傳送您對下列選項的寶貴意見...

    這個網頁