連結至第三方 Git 存放區

本文說明如何將遠端存放區連結至 Dataform 存放區。連結存放區後,您在 Dataform 開發工作區中所做的變更,就能推送至遠端 Git 存放區,或從該處提取。

您可以透過 HTTPS 或 SSH 連線至遠端存放區。

下表列出支援的 Git 供應商,以及其存放區可用的連線方法:

Git 供應商 連線方法
Azure DevOps Services SSH
Bitbucket SSH
GitHub SSH 或 HTTPS
GitLab SSH 或 HTTPS

事前準備

  1. 如果貴機構或專案透過 dataform.restrictGitRemotes 機構政策限制遠端 Git 存放區,請務必先將遠端 Git 存放區加入政策的允許清單,再建立要連線至遠端存放區的 Dataform 存放區。詳情請參閱「限制遠端存放區」。
  2. 選取或建立 Dataform 存放區。 您稍後需要使用這項資訊,與預設 Dataform 服務帳戶共用密鑰。

必要的角色

如要取得將 Dataform 存放區連結至遠端 Git 存放區所需的權限,請要求管理員授予您存放區的 Dataform 管理員 (roles/dataform.admin) 身分與存取權管理角色。如要進一步瞭解如何授予角色,請參閱「管理專案、資料夾和機構的存取權」。

您或許還可透過自訂角色或其他預先定義的角色取得必要權限。

透過 SSH 連線至遠端存放區

如要透過 SSH 連線至遠端存放區,您需要產生 SSH 金鑰和 Secret Manager 密鑰。安全殼層金鑰包含公開安全殼層金鑰和私密安全殼層金鑰。您必須將公開安全殼層金鑰提供給 Git 供應商,並使用私密安全殼層金鑰建立 Secret Manager 密碼。然後與預設的 Dataform 服務帳戶共用密鑰。

Dataform 會使用含有私密安全殼層金鑰的 Secret 登入 Git 供應商,代表開發人員提交變更。Dataform 會使用開發人員的 Google Cloud 電子郵件地址進行這些提交,因此您可以判斷每個提交是由誰完成。

如要透過 SSH 將遠端存放區連結至 Dataform 存放區,請按照下列步驟操作:

  1. 在 Git 供應商中,執行下列操作:

    Azure DevOps Services

    1. 在 Azure DevOps Services 中建立私密安全殼層金鑰
    2. 將公開安全殼層金鑰上傳至 Azure DevOps Services 存放區。

    Bitbucket

    1. 在 Bitbucket 中建立私密 SSH 金鑰
    2. 將公開安全殼層金鑰上傳至 Bitbucket 存放區。

    GitHub

    1. 在 GitHub 中建立私密安全殼層金鑰
    2. 將 GitHub 公開 SSH 金鑰上傳至 GitHub 存放區。

    GitLab

    1. 在 GitLab 中建立私密 SSH 金鑰
    2. 將 GitLab 公開 SSH 金鑰上傳至 GitLab 存放區。
  2. 在 Secret Manager 中建立密鑰,並將私密安全殼層金鑰設為密鑰值。

    1. 將密鑰存取權授予預設 Dataform 服務帳戶

      預設 Dataform 服務帳戶的格式如下:

      service-PROJECT_NUMBER@gcp-sa-dataform.iam.gserviceaccount.com
      
    2. roles/secretmanager.secretAccessor角色指派給服務帳戶。

  3. 前往 Google Cloud 控制台的「Dataform」頁面。

    前往 Dataform

  4. 選取要連結至遠端存放區的 Dataform 存放區。

  5. 在存放區頁面中,按一下「設定」>「Connect with Git」

  6. 在「Link to remote repository」(連結至遠端存放區) 窗格的「Remote Git repository URL」(遠端 Git 存放區網址) 欄位中,輸入遠端 Git 存放區的網址,結尾為 .git

    遠端 Git 存放區網址必須採用下列其中一種格式:

    • 絕對網址:ssh://git@{host_name}[:{port}]/{repository_path}port 為選填。
    • 類似 SCP 的網址:git@{host_name}:{repository_path}
  7. 在「Default remote branch name」(預設遠端分支版本名稱) 欄位中,輸入遠端 Git 存放區主要開發分支版本的名稱。

  8. 在「Secret」(密碼) 下拉式選單中,選取遠端 Git 存放區的密碼。

  9. 在「SSH 公開主機金鑰值」欄位中,輸入 Git 供應商的公開主機金鑰。

    Azure DevOps Services

    SSH 公開主機金鑰值的格式必須為 known_hosts 檔案。 這個值必須包含演算法和以 base64 格式編碼的公開金鑰,但不含主機名稱或 IP,格式如下:

    ALGORITHM BASE64_KEY_VALUE
    

    如要擷取 Azure DevOps Services 公開主機金鑰,請在終端機中執行 ssh-keyscan -t rsa ssh.dev.azure.com 指令。

    Bitbucket

    SSH 公開主機金鑰值的格式必須為 known_hosts 檔案。 這個值必須包含演算法和以 base64 格式編碼的公開金鑰,但不含主機名稱或 IP,格式如下:

    ALGORITHM BASE64_KEY_VALUE
    

    如要擷取 Bitbucket 公開主機金鑰,請參閱「設定 SSH」。

    GitHub

    SSH 公開主機金鑰值的格式必須為 known_hosts 檔案。 這個值必須包含演算法和以 base64 格式編碼的公開金鑰,但不含主機名稱或 IP,格式如下:

    ALGORITHM BASE64_KEY_VALUE
    

    如要擷取 GitHub 公開主機金鑰,請參閱 GitHub 的安全殼層 (SSH) 金鑰指紋

    GitLab

    SSH 公開主機金鑰值的格式必須為 known_hosts 檔案。 這個值必須包含演算法和以 base64 格式編碼的公開金鑰,但不含主機名稱或 IP,格式如下:

    ALGORITHM BASE64_KEY_VALUE
    

    如要擷取 GitLab 公開主機金鑰,請參閱「SSH known_hosts 項目」。

  10. 按一下「Link」(連結)

透過 HTTPS 連線至遠端存放區

如要透過 HTTPS 連線至遠端存放區,您需要使用個人存取權杖建立 Secret Manager 密鑰,並與預設的 Dataform 服務帳戶共用該密鑰。

接著,Dataform 會使用存取權杖登入 Git 供應商,代表開發人員提交變更。Dataform 會使用開發人員的 Google Cloud 電子郵件地址進行這些提交,因此您可以判斷每個提交是由誰進行。

如要透過 HTTPS 將遠端存放區連結至 Dataform 存放區,請按照下列步驟操作:

  1. 在 Git 供應商中,執行下列操作:

    GitHub

    1. 在 GitHub 中,建立精細的個人存取權杖傳統個人存取權杖

      • 如要取得精細的 GitHub 個人存取權杖,請按照下列步驟操作:
      1. 選取存放區存取權,僅限所選存放區,然後選取要連結的存放區。

      2. 授予存放區內容的讀寫權限。

      3. 視需求設定合適的權杖到期時間。

      • 如要取得傳統 GitHub 個人存取權杖,請按照下列步驟操作:
      1. 授予 Dataform repo 權限。

      2. 視需求設定合適的權杖到期時間。

    2. 如果貴機構使用 SAML 單一登入 (SSO),請授權權杖

    GitLab

    1. 在 GitLab 中建立 GitLab 個人存取權杖

    2. 將權杖命名為 dataform

      GitLab 個人存取權杖必須命名為 dataform

    3. 授予 Dataform apiread_repositorywrite_repository 權限。

    4. 視需求設定合適的權杖到期時間。

  2. 在 Secret Manager 中,建立密鑰,其中包含遠端存放區的個人存取權杖。

  3. 將密鑰存取權授予預設 Dataform 服務帳戶

    預設 Dataform 服務帳戶的格式如下:

    service-PROJECT_NUMBER@gcp-sa-dataform.iam.gserviceaccount.com
    
    1. roles/secretmanager.secretAccessor角色指派給服務帳戶。
  4. 前往 Google Cloud 控制台的「Dataform」頁面。

    前往 Dataform

  5. 選取要連結至遠端存放區的 Dataform 存放區。

  6. 在存放區頁面中,按一下「設定」>「Connect with Git」

  7. 在「Link to remote repository」(連結至遠端存放區) 窗格的「Remote Git repository URL」(遠端 Git 存放區網址) 欄位中,輸入遠端 Git 存放區的網址,結尾為 .git

    遠端 Git 存放區的網址不得包含使用者名稱或密碼。

  8. 在「Default remote branch name」(預設遠端分支版本名稱) 欄位中,輸入遠端 Git 存放區主要開發分支版本的名稱。

  9. 在「Secret」(密碼) 下拉式選單中,選取遠端 Git 存放區的密碼。

  10. 按一下「Link」(連結)

編輯遠端存放區連線

如要編輯 Dataform 存放區與遠端 Git 存放區之間的連線,請按照下列步驟操作:

  1. 前往 Google Cloud 控制台的「Dataform」頁面。

    前往 Dataform

  2. 按一下要編輯的存放區。

  3. 在存放區頁面中,按一下「設定」>「編輯 Git 連線」

  4. 在「Link to remote repository」(連結至遠端存放區) 窗格中,編輯連線設定。

  5. 按一下「更新」

後續步驟