Cloud SQL에서 데이터 내보내기

이 페이지에서는 Cloud SQL 인스턴스 또는 Cloud SQL에서 관리하지 않는 데이터베이스 서버에서 데이터를 내보내는 방법을 설명합니다.

Cloud SQL 데이터를 Cloud Storage의 CSV 또는 SQL 덤프 파일로 내보냅니다. 그런 다음 파일을 Cloud SQL의 다른 MySQL 데이터베이스로 가져올 수 있습니다. 데이터를 로컬로 액세스할 수 있도록 Cloud Storage에서 로컬 환경으로 다운로드할 수도 있습니다.

Cloud Storage로 데이터를 내보내려면 인스턴스의 서비스 계정에 프로젝트에서 설정된 storage.objectAdmin IAM 역할이 있어야 합니다. 자세한 내용은 Cloud Storage의 Cloud Identity and Access Management를 참조하세요.

내보내기는 데이터베이스 리소스를 사용하지만 인스턴스가 프로비저닝되지 않는 한 일반적인 데이터베이스 작업에 지장을 주지 않습니다.

데이터 내보내기 권장사항은 데이터 가져오기 및 내보내기 권장사항을 참조하세요.

CSV 파일을 내보낼 수 있습니다. 예를 들어 다른 SQL 데이터베이스로 내보내려는 경우 SQL 덤프 파일을 내보낼 수도 있습니다.

표준 내보내기와 서버리스 내보내기 비교

Cloud SQL에서 표준 내보내기의 경우 내보내기는 데이터베이스가 온라인 상태일 때 실행됩니다. 내보내는 데이터베이스가 작을수록 영향이 발생할 가능성이 최소화됩니다. 그러나 대규모 데이터베이스가 있거나 데이터베이스에 BLOB와 같은 대형 객체가 있으면 내보내기로 인해 데이터베이스 성능이 저하될 수 있습니다. 이로 인해 데이터베이스에 대한 데이터베이스 쿼리와 작업을 수행하는 데 걸리는 시간도 영향을 받을 수 있습니다. 내보내기를 시작하면 데이터베이스가 느리게 응답하더라도 중지할 수 없습니다.

내보내기 중에 응답이 느려지지 않도록 하려면 서버리스 내보내기를 사용하면 됩니다. 서버리스 내보내기를 사용하면 Cloud SQL에서 내보내기 작업을 오프로드할 별도의 임시 인스턴스를 만듭니다. 내보내기 작업을 오프로드하면 기본 인스턴스의 데이터베이스가 계속 쿼리를 처리하고 일반 성능 속도로 작업을 수행할 수 있습니다. 데이터 내보내기가 완료되면 임시 인스턴스가 자동으로 삭제됩니다.

서버리스 내보내기는 임시 인스턴스를 만드는 시간으로 인해 표준 내보내기보다 시간이 오래 걸립니다. 최소한 5분 이상 소요되지만 대규모 데이터베이스의 경우에는 더 오래 걸릴 수 있습니다. 사용할 내보내기 유형을 결정하기 전에 시간과 성능에 미치는 영향을 고려하세요.

기본 인스턴스나 읽기 복제본에서 서버리스 내보내기를 사용할 수 있습니다.

CSV 및 mysqldump 내보내기는 다른 MySQL 데이터베이스에서 내보내기와 동일하게 Cloud SQL에서 동작합니다. 내보내기 중에 --master-data 옵션을 사용하지 않는 한 내보내기 작업 중에는 데이터베이스가 잠기지 않습니다.

내보내기는 데이터베이스 리소스를 사용하지만 인스턴스가 프로비저닝되지 않는 한 일반적인 데이터베이스 작업에 지장을 주지 않습니다.

데이터 내보내기 권장사항은 데이터 가져오기 및 내보내기 권장사항을 참조하세요.

가져오기와 내보내기에 동일한 SQL 모드 사용

SQL 모드 설정은 Cloud SQL이 SQL 쿼리를 해석하는 방법에 영향을 줍니다. 예를 들어 Strict SQL을 사용 설정하지 않고 데이터베이스에서 내보낸 다음 Cloud SQL(기본적으로 Strict SQL이 사용 설정됨)로 가져오기를 시도하는 경우 가져오기가 실패할 수 있습니다. 권장사항은 내보내기에 사용한 것과 동일한 SQL 모드를 가져오기에 사용하는 것입니다. 원본 데이터베이스와 대상 데이터베이스의 SQL 모드를 검토하여 호환성을 확인합니다. 특히 Strict SQL 모드를 사용 설정하는 플래그에 주의합니다. Strict SQL이 데이터베이스에 설정되지 않은 경우 Cloud SQL에서 제거하는 것이 좋습니다. Strict SQL을 제거하는 경우 다른 플래그를 설정해야 합니다. Cloud SQL 인스턴스에 원하는 모드가 설정되어 있는지 확인하려면 SELECT @@GLOBAL.sql_mode;를 실행합니다.

Cloud SQL에서 SQL 덤프 파일로 데이터 내보내기

SQL 덤프 파일을 만들려면 Cloud SQL에서 Cloud Storage로 데이터를 내보냅니다. 파일이 Cloud Storage에 저장되면 다른 Cloud SQL 데이터베이스로 가져올 수 있습니다. 데이터를 로컬로 액세스할 수 있도록 Cloud Storage에서 로컬 환경으로 다운로드할 수도 있습니다.

시작하기 전에

이 절차에서는 파일을 Cloud Storage로 내보내야 합니다. Cloud Storage로 데이터를 내보내려면 인스턴스의 서비스 계정에 프로젝트에서 설정된 storage.objectAdmin IAM 역할이 있어야 합니다. IAM 역할에 대한 도움말은 Cloud Storage용 Cloud Identity and Access Management를 참조하세요.

Google Cloud Console의 인스턴스 개요 페이지에서 인스턴스의 서비스 계정 이름을 확인할 수 있습니다. gsutil 도구로 버킷을 검사하여 Cloud Storage 버킷의 역할을 확인할 수 있습니다.

gsutil iam get gs://[BUCKET_NAME]

버킷에 IAM을 사용하는 방법에 대해 자세히 알아보세요.

Cloud Storage의 SQL 덤프 파일로 데이터 내보내기

Cloud SQL 인스턴스의 데이터베이스에서 Cloud Storage 버킷의 SQL 덤프 파일로 데이터를 내보내려면 다음 안내를 따르세요.

Console

  1. Google Cloud Console의 Cloud SQL 인스턴스 페이지로 이동합니다.

    Cloud SQL 인스턴스 페이지로 이동

  2. 데이터를 내보낼 인스턴스를 클릭하여 개요 페이지를 엽니다.
  3. 버튼 모음에서 내보내기를 클릭합니다.
  4. 파일 형식에서 SQL을 클릭하여 SQL 덤프 파일을 만듭니다.
  5. 내보낼 데이터에서 이 인스턴스에서 하나 이상의 데이터베이스를 클릭하여 특정 데이터베이스를 내보냅니다.
  6. 드롭다운 메뉴를 사용하여 내보낼 데이터베이스를 선택합니다.
  7. 대상 아래에서 찾아보기를 선택하여 내보낼 Cloud Storage 버킷 또는 폴더를 검색합니다.
  8. 내보내기를 클릭하여 시작합니다.

gcloud

  1. Cloud Storage 버킷을 아직 만들지 않았으면 만듭니다.

    버킷을 만드는 방법은 스토리지 버킷 만들기를 참조하세요.

  2. 파일을 버킷에 업로드합니다.

    버킷에 파일을 업로드하는 데 도움이 필요하면 객체 업로드를 참조하세요.

  3. 어떤 인스턴스에서 내보낼지 설명합니다.
      gcloud sql instances describe [INSTANCE_NAME]
      
  4. serviceAccountEmailAddress 필드를 복사합니다.
  5. gsutil iam을 사용하여 버킷의 서비스 계정에 storage.objectAdmin IAM 역할을 부여합니다. IAM 권한 설정에 대한 도움말은 IAM 권한 사용을 참조하세요.
  6. 데이터베이스를 내보냅니다.
      gcloud sql export sql [INSTANCE_NAME] gs://[BUCKET_NAME]/sqldumpfile.gz \
                                  --database=[DATABASE_NAME] --offload
      

    export sql 명령어에는 트리거 또는 저장 프로시저가 포함되지 않지만 뷰가 포함됩니다. 트리거 또는 저장 프로시저를 내보내려면 mysqldump 도구를 사용합니다.

    export sql 명령어 사용 방법에 대한 자세한 내용은 sql export sql 명령어 참조 페이지를 확인하세요.

  7. 이전에 설정한 IAM 역할을 유지할 필요가 없으면 지금 취소합니다.

REST v1beta4

  1. 내보내기에 사용할 버킷을 만듭니다.
    gsutil mb -p [PROJECT_NAME] -l [LOCATION_NAME] gs://[BUCKET_NAME]
    

    이 단계는 필수 사항은 아니지만 다른 데이터에 대한 액세스를 열지 않아도 되기 때문에 적극 권장됩니다.

  2. 인스턴스에 버킷의 storage.objectAdmin IAM 역할을 제공합니다. IAM 권한 설정에 대한 도움말은 IAM 권한 사용을 참조하세요.
  3. 데이터베이스를 내보냅니다.

    아래의 요청 데이터를 사용하기 전에 다음을 바꿉니다.

    • project-id: 프로젝트 ID
    • instance-id: 인스턴스 ID
    • bucket_name: Cloud Storage 버킷 이름
    • path_to_dump_file: SQL 덤프 파일의 경로
    • database_name_1: Cloud SQL 인스턴스 내 데이터베이스의 이름
    • database_name_2: Cloud SQL 인스턴스 내 데이터베이스의 이름
    • offload: 서버리스 내보내기를 사용 설정합니다. 서버리스 내보내기를 사용하기 위해 true로 설정합니다.

    HTTP 메서드 및 URL:

    POST https://www.googleapis.com/sql/v1beta4/projects/project-id/instances/instance-id/export

    JSON 요청 본문:

    {
     "exportContext":
       {
          "fileType": "SQL",
          "uri": "gs://bucket_name/path_to_dump_file",
          "databases": ["database_name"]
          "offload": true | false
        }
    }
    

    요청을 보내려면 다음 옵션 중 하나를 펼칩니다.

    다음과 유사한 JSON 응답이 표시됩니다.

  4. 이전에 설정한 IAM 역할을 유지할 필요가 없으면 지금 취소합니다.
이 요청에 대한 전체 매개변수 목록은 instances:export 페이지를 참조하세요.

Cloud SQL에서 CSV 파일로 데이터 내보내기

다른 도구와 환경에서 사용할 수 있는 CSV 형식으로 데이터를 내보낼 수 있습니다. 내보내기는 데이터베이스 수준에서 발생합니다. CSV 내보내기 도중에 내보낼 스키마를 지정할 수 있습니다. 데이터베이스 수준의 모든 스키마는 내보낼 수 있습니다.

시작하기 전에

이 절차에서는 파일을 Cloud Storage로 내보내야 합니다. Cloud Storage로 데이터를 내보내려면 인스턴스의 서비스 계정에 프로젝트에서 설정된 storage.objectAdmin IAM 역할이 있어야 합니다. IAM 역할에 대한 도움말은 Cloud Storage용 Cloud Identity and Access Management를 참조하세요.

Google Cloud Console의 인스턴스 개요 페이지에서 인스턴스의 서비스 계정 이름을 확인할 수 있습니다. gsutil 도구로 버킷을 검사하여 Cloud Storage 버킷의 역할을 확인할 수 있습니다.

gsutil iam get gs://[BUCKET_NAME]

버킷에 IAM을 사용하는 방법에 대해 자세히 알아보세요.

Cloud Storage의 CSV 파일로 데이터 내보내기

Cloud SQL 인스턴스의 데이터베이스에서 Cloud Storage 버킷의 SQL 덤프 파일로 데이터를 내보내려면 다음 안내를 따르세요.

Console

  1. Google Cloud Console의 Cloud SQL 인스턴스 페이지로 이동합니다.

    Cloud SQL 인스턴스 페이지로 이동

  2. 인스턴스를 클릭하여 개요 페이지를 엽니다.
  3. 내보내기를 클릭합니다.
  4. Cloud Storage 내보내기 위치에서 내보낼 Cloud Storage 버킷이나 폴더를 선택합니다.
  5. 이름 필드에 내보내기 파일 이름을 입력하고 선택을 클릭합니다.

    파일 확장자 .gz를 사용하여 내보내기 파일을 압축할 수 있습니다.

  6. 형식CSV로 설정합니다.
  7. 고급 옵션 표시를 클릭합니다.
  8. 데이터베이스 아래의 드롭다운 메뉴에서 데이터베이스의 이름을 선택합니다.
  9. SQL 쿼리에서 데이터를 내보낼 테이블을 지정하는 SQL 쿼리를 입력합니다.

    예를 들어 guestbook 데이터베이스에서 entries 테이블의 전체 콘텐츠를 내보내려면 다음 명령어를 입력합니다.

    SELECT * FROM guestbook.entries;
    데이터베이스 전체를 CSV 형식으로 내보낼 수는 없으므로 쿼리를 통해 지정한 데이터베이스에서 테이블을 지정해야 합니다.

  10. 내보내기를 클릭하여 시작합니다.
  11. 데이터베이스를 내보낼까요? 대화상자가 열리고 크기가 큰 데이터베이스의 경우 내보내기 프로세스가 1시간 이상 걸릴 수 있다는 메시지가 표시됩니다. 내보내기 작업 중에는 인스턴스에서 정보 보기만 가능합니다. 내보내기를 시작하면 중지할 수 없습니다. 내보내기를 시작해도 좋으면 내보내기를 클릭합니다. 그렇지 않으면 취소를 클릭합니다.

gcloud

  1. Cloud Storage 버킷을 아직 만들지 않았으면 만듭니다.

    버킷을 만드는 방법은 스토리지 버킷 만들기를 참조하세요.

  2. 파일을 버킷에 업로드합니다.

    버킷에 파일을 업로드하는 데 도움이 필요하면 객체 업로드를 참조하세요.

  3. 어떤 인스턴스에서 내보낼지 설명합니다.
    gcloud sql instances describe [INSTANCE_NAME]
    
  4. gsutil iam을 사용하여 버킷의 서비스 계정에 storage.objectAdmin IAM 역할을 부여합니다. IAM 권한 설정에 대한 도움말은 IAM 권한 사용을 참조하세요.
  5. 데이터베이스를 내보냅니다.
    gcloud sql export csv [INSTANCE_NAME] gs://[BUCKET_NAME]/[FILE_NAME] \
                                --database=[DATABASE_NAME]
                                --offload
                                --query=[SELECT_QUERY]
    

    export csv 명령어 사용에 대한 자세한 내용은 sql export csv 명령어 참조 페이지를 확인하세요.

  6. 이전에 설정한 IAM 역할을 유지할 필요가 없으면 지금 취소합니다.

REST v1beta4

  1. 내보내기에 사용할 버킷을 만듭니다.
    gsutil mb -p [PROJECT_NAME] -l [LOCATION_NAME] gs://[BUCKET_NAME]
    

    이 단계는 필수 사항은 아니지만 다른 데이터에 대한 액세스를 열지 않아도 되기 때문에 적극 권장됩니다.

  2. 인스턴스에 버킷의 storage.objectAdmin IAM 역할을 제공합니다. IAM 권한 설정에 대한 도움말은 IAM 권한 사용을 참조하세요.
  3. 데이터베이스를 내보냅니다.

    아래의 요청 데이터를 사용하기 전에 다음을 바꿉니다.

    • project-id: 프로젝트 ID
    • instance-id: 인스턴스 ID
    • bucket_name: Cloud Storage 버킷 이름
    • path_to_csv_file: CSV 파일의 경로
    • database_name: Cloud SQL 인스턴스 내 데이터베이스의 이름
    • offload: 서버리스 내보내기를 사용 설정합니다. 서버리스 내보내기를 사용하기 위해 true로 설정합니다.
    • select_query: 내보낼 SQL 쿼리

    HTTP 메서드 및 URL:

    POST https://www.googleapis.com/sql/v1beta4/projects/project-id/instances/instance-id/export

    JSON 요청 본문:

    {
     "exportContext":
       {
          "fileType": "CSV",
          "uri": "gs://bucket_name/path_to_csv_file",
          "databases": ["database_name"],
          "offload": true | false
          "csvExportOptions":
           {
               "selectQuery":"select_query"
           }
       }
    }
    

    요청을 보내려면 다음 옵션 중 하나를 펼칩니다.

    다음과 유사한 JSON 응답이 표시됩니다.

    select 쿼리에서 데이터베이스를 지정하는 경우 databases 속성이 재정의됩니다.

  4. 이전에 설정한 IAM 역할을 유지할 필요가 없으면 지금 취소합니다.
이 요청에 대한 전체 매개변수 목록은 instances:export 페이지를 참조하세요.

CSV 형식으로 내보내기는 다음 SQL 문을 실행하는 것과 같습니다.

  SELECT [QUERY] INTO OUTFILE ... CHARACTER SET 'utf8mb4'
        FIELDS TERMINATED BY ',' OPTIONALLY ENCLOSED BY '\"'
        ESCAPED BY '\\' LINES TERMINATED BY '\n'

이 요청에 대한 전체 매개변수 목록은 instances:export 페이지를 참조하세요.

로컬 MySQL 서버에서 CSV 파일로 데이터 내보내기

Cloud SQL에서 관리하지 않는 MySQL 데이터베이스를 나중에 Cloud SQL로 가져올 수 있도록 CSV 파일로 내보내려면 다음 명령어를 사용합니다.

mysql --host=[INSTANCE_IP] --user=[USER_NAME] --password [DATABASE] \
-e " SELECT * FROM [TABLE] INTO OUTFILE '[FILE_NAME]' CHARACTER SET 'utf8mb4'
     FIELDS TERMINATED BY ',' OPTIONALLY ENCLOSED BY '\"' ESCAPED BY '\"' "

mysqldump를 사용한 데이터 내보내기

데이터를 Cloud SQL 데이터베이스로 가져오기 위해 온프레미스 MySQL 데이터베이스 또는 Cloud SQL 데이터베이스에서 내보내는 경우 다음 플래그와 함께 mysqldump 유틸리티를 사용해야 합니다.

  • --databases 내보낼 데이터베이스의 명시적 목록을 지정하려면 --databases 옵션을 사용해야 합니다. 이 목록에 mysql 시스템 데이터베이스가 포함되면 안 됩니다.
  • --hex-blob 데이터베이스에 바이너리 필드가 포함된 경우 이 플래그를 사용하여 바이너리 필드를 올바르게 가져와야 합니다.
  • --set-gtid-purged=OFF GTID 정보는 SQL 덤프 파일에 포함되면 안 되고, SQL 덤프 파일로 바이너리 로깅이 사용 중지되어도 안 됩니다. (MySQL 5.5 또는 외부 복제에는 필요하지 않음)
  • --single-transaction 외부 서버에서 복제

표준 구성

명령줄에서 mysqldump를 실행합니다.

mysqldump --databases [DATABASE_NAME] -h [INSTANCE_IP] -u [USERNAME] -p \
--hex-blob --single-transaction --set-gtid-purged=OFF \
--default-character-set=utf8mb4 > [SQL_FILE].sql

mysqldump에 대한 도움말은 mysqldump 참조를 확인하세요.

외부 복제

외부 서버 구성에 사용할 덤프 파일을 만들려면 외부 서버에서 복제를 참조하세요.

다음 단계