Datastream의 SQL Server 소스가 프리뷰 버전으로 제공됩니다. 블로그 게시물 읽기
사용하기 쉬운 서버리스 변경 데이터 캡처 및 복제 서비스.
MySQL, PostgreSQL, AlloyDB, SQL Server, Oracle 데이터베이스의 스트리밍 데이터에 액세스
BigQuery용 Datastream으로 BigQuery에서 거의 실시간 분석
레이크하우스와 운영 데이터베이스 간의 완전한 데이터 루프
보안 연결이 기본 제공되는 간편한 설정을 통해 가치를 빠르게 실현
리소스를 프로비저닝하거나 관리하지 않고도 자동으로 확장되는 서버리스 플랫폼
이점
최소한의 지연 시간으로 데이터 복제 및 동기화
이기종 데이터베이스, 스토리지 시스템, 애플리케이션 전반에서 짧은 지연 시간으로 안정적으로 데이터를 동기화하며 소스 성능에 미치는 영향을 최소화합니다.
서버리스 아키텍처로 확장 또는 축소
관리할 인프라가 없으며, 원활하게 수직 확장 또는 축소할 수 있는 사용하기 쉬운 서버리스 방식의 서비스로 빠르게 준비하고 실행할 수 있습니다.
Google Cloud 서비스의 뛰어난 유연성
최고의 Google Cloud 서비스(예: BigQuery, Lakehouse for Apache Iceberg, Spanner, Dataflow)로 조직 전체에서 데이터를 연결하고 통합하세요.
주요 특징
Datastream은 MySQL, PostgreSQL, AlloyDB, SQL Server, Oracle 데이터베이스에서 모든 변경사항(삽입, 업데이트, 소거)을 읽고 전송하여 BigQuery, Cloud SQL, Cloud Storage, Spanner로 데이터를 로드합니다. 에이전트가 없는 Google 기반이기 때문에 발생하는 모든 이벤트를 안정적으로 스트리밍할 수 있습니다. Datastream은 매월 5,000억 개가 넘는 이벤트를 처리합니다.
Datastream을 사용하여 AlloyDB와 Iceberg 및 BigQuery 테이블 간에 완전한 데이터 루프를 만들고 Knowledge Catalog를 활용하여 데이터 거버넌스를 구현하고 데이터 검색 가능성을 높일 수 있습니다.
예상치 못한 중단으로 인해 비용이 많이 들 수 있습니다. Datastream의 강력한 스트림 복구 기능은 다운타임과 데이터 손실을 최소화하므로 중요한 비즈니스 운영을 유지하고 중단 없는 데이터 파이프라인을 기반으로 정보에 입각한 결정을 내릴 수 있습니다.
소스 스키마가 변경되면 Datastream에서 빠르고 원활한 스키마 드리프트 해결을 지원합니다. Datastream이 파일을 순환하여 스키마가 변경될 때마다 대상 버킷에 새 파일을 만듭니다. 원본 소스 데이터 유형은 최신 버전의 스키마 레지스트리를 통해 API 호출만 하면 됩니다.
Datastream은 전송 중 데이터를 보호하기 위해 여러 가지 안전한 비공개 연결 방식을 지원합니다. 또한 데이터는 전송 및 저장 중에 암호화되므로 데이터가 스트리밍되는 동안 보호되어 안심할 수 있습니다.
고객
Datastream은 다양한 운영 데이터 소스에서 BigQuery로 고품질의 조정된 데이터 복제를 달성하는 데 중요한 역할을 했습니다. 사용하기 쉽고 서버리스이며 확장성이 뛰어나 짧은 시간 안에 첫 번째 스트림을 설정할 수 있었습니다. 데이터 수집은 Google Cloud의 데이터 플랫폼 마이그레이션의 기반이므로 속도가 매우 중요했습니다.
올렉산드르 칼레뉴크, Just Eat Takeaway 데이터 수집 리드

새로운 소식
Google Cloud 뉴스레터를 신청하여 제품 업데이트, 행사 정보, 특별 이벤트 등의 소식을 받아보세요.
문서
Google의 Datastream 기반 오픈소스 툴킷을 사용하여 Oracle에서 PostgreSQL용 Cloud SQL로 마이그레이션할 수 있습니다.
사용 사례
ORACLE®은 Oracle Corporation의 등록 상표입니다.