BigQuery 마이그레이션 서비스 소개

이 문서에서는 BigQuery 마이그레이션 서비스에 대한 개요를 제공합니다.

BigQuery 마이그레이션 서비스는 데이터 웨어하우스를 BigQuery로 마이그레이션하기 위한 포괄적인 솔루션입니다. 평가 및 계획, 다양한 SQL 언어에 대한 SQL 변환, 데이터 전송, 데이터 검증을 포함한 각 마이그레이션 단계를 지원하는 기능이 포함되어 있습니다. 이러한 도구를 함께 사용하면 마이그레이션을 가속화하고 위험을 줄여 더욱 빠르게 가치를 창출할 수 있습니다.

BigQuery Migration Service에는 다음 기능이 포함됩니다.

  • BigQuery 마이그레이션 평가: BigQuery 마이그레이션 평가를 실행하여 데이터 웨어하우스 마이그레이션을 평가하고 계획합니다.
  • SQL 변환 도구: 변환 도구는 Gemini로 향상된 SQL 맞춤설정을 비롯하여 SQL 쿼리를 GoogleSQL로 자동 변환합니다. 일괄 SQL 변환기를 사용하여 SQL 스크립트를 일괄적으로 마이그레이션하거나 대화형 SQL 변환기를 사용하여 개별 쿼리를 변환할 수 있습니다. SQL 변환 API를 사용하여 워크로드를 BigQuery로 마이그레이션할 수도 있습니다.
  • BigQuery Data Transfer Service: 데이터 소스에서 BigQuery로 데이터를 로드하는 데이터 전송을 설정합니다. 자세한 내용은 BigQuery Data Transfer Service란 무엇인가요?를 참고하세요.

다음 오픈소스 도구를 사용하여 이전 프로세스를 지원할 수도 있습니다.

  • 데이터 마이그레이션 도구: 데이터 마이그레이션 도구를 사용하여 데이터 웨어하우스에서 BigQuery로의 마이그레이션을 자동화합니다. 이 도구는 BigQuery Data Transfer Service, BigQuery 변환 서비스, 데이터 검증 도구를 사용하여 데이터를 전송하고 DDL, DML, SQL 쿼리를 변환하고 검증합니다.
  • 데이터 검증 도구: 데이터를 BigQuery로 마이그레이션한 후 데이터 검증 도구를 실행하여 소스 테이블과 대상 테이블이 일치하는지 확인합니다.
  • BigQuery 권한 매퍼: 권한 매퍼를 사용하여 사용자가 수정할 수 있는 권한 맵의 생성 및 유지관리를 자동화합니다. 권한 매퍼를 사용하여 중복된 권한과 사용자 그룹을 분석하고 조정하는 동시에 오류 보고서를 생성할 수 있습니다. 이 도구는 BigQuery 그룹, 사용자, 바인딩 생성을 위한 JSON 및 Terraform 스크립트를 출력합니다.
  • Cloud Composer 템플릿: Cloud Composer 템플릿을 사용하여 새 Airflow DAG를 간편하게 만들거나 기존 조정 작업을 온프레미스에서 클라우드로 이전합니다.
  • Cloud Foundation 패브릭: 조직 전체 랜딩 존 청사진, 네트워크 패턴 및 제품 기능용 참조 청사진, 적응형 모듈 라이브러리 등 Cloud de Confiance by S3NS용 Terraform 예시 및 모듈을 확인하세요.

할당량

할당량 및 한도는 작업 수와 파일 크기에 적용됩니다. 마이그레이션 서비스 할당량 및 한도에 대한 자세한 내용은 할당량 및 한도를 참조하세요.

가격 책정

BigQuery Migration API는 무료로 사용할 수 있습니다. 그러나 입력 및 출력 파일에 사용되는 스토리지에는 일반 요금이 발생합니다. 자세한 내용은 스토리지 가격 책정을 참조하세요.

또한 Google Cloud Migration Center의 비용 예상 기능을 사용하여 BigQuery로 마이그레이션할 데이터 웨어하우스 설정의 실행 예상 비용을 산출할 수 있습니다. 자세한 내용은 비용 예측 시작 및 데이터 웨어하우징 요구사항 지정을 참조하세요.

다음 단계