핵심 요약
컬리의 데이터 파이프라인에 BigQuery를 도입하여 분석 속도와 데이터 활용성을 개선한 사례를 다룹니다.
구현 방법
- BigQuery 기반 데이터 웨어하우스로의 도입 및 파이프라인 구조 재설계
- 데이터 모델링과 파티셔닝/클러스터링을 활용한 쿼리 성능 최적화
- ETL 흐름의 SQL 중심 전환으로 운영 효율성 제고
주요 결과
- 데이터 처리 속도와 쿼리 응답성의 개선 기대
- 분석 비용 관리 및 데이터 활용 범위 확장에 기여 가능
컬리의 BigQuery 도입기 - 2부
2023년 02월 17일2