Object Storage에 저장된 데이터를 빠르게 분석하는 대화형 쿼리 서비스.
Quick Query는 대용량 데이터를 표준 SQL을 사용하여 간편하게 분석할 수 있는 대화형 쿼리 서비스입니다. Object Storage, Hadoop, RDB 등 다양한 데이터 소스에 쉽게 접근이 가능하고, 여러 표준 데이터 형식과의 호환성을 제공합니다. 또한 대규모 병렬 처리(Massively Parallel Processing, MPP) 기반의 쿼리 엔진을 통해 빠른 처리 속도를 제공합니다.
- 쉽고 빠른 데이터 조회
Object Storage에 저장된 데이터에 대해 스키마를 정의한 후 표준 SQL을 사용하여 쿼리를 실행하면 쉽고 빠르게 조회가 가능합니다. SQL을 다룰 수 있는 사용자는 전문 분석가가 아니더라도 누구나 손쉽게 대규모 데이터 세트를 분석할 수 있습니다.
- 신속한 병렬 분산 처리
Quick Query는 병렬 분산 처리가 가능한 Trino 엔진을 사용하여 자동으로 쿼리를 분할하고, 동시에 여러 노드에서 병렬 처리하여 대용량 데이터도 빠르게 쿼리 결과를 확인할 수 있습니다.
- 다양한 상품 구조
Quick Query는 공용 고정자원 모드와 공용 자원확장 모드, 그리고 개인용 자원확장 모드를 제공합니다. 공용 고정자원 모드는 대규모 데이터 쿼리에 대한 안정적인 응답 속도를 지원하며, 공용 자원확장 모드는 사용 빈도가 불규칙한 경우 더 저렴한 비용으로 이용할 수 있습니다. 또한 개인용 자원확장 모드는 각 사용자가 독립적인 환경에서 분석 작업을 수행할 수 있도록 지원하여 사용자 요구에 맞는 구조의 Quick Query를 이용할 수 있습니다.
- 아키텍처 다이어그램
- 다양한 데이터 소스 지원
Object Storage, HDFS, Hive, RDB(PostgreSQL, MariaDB, MS-SQL, MySQL 등), File
호환되는 표준 데이터 형식
CSV, JSON, ORC, Avro, Parquet 등
- 편리한 데이터 관리
쿼리 이력 조회 (쿼리 실행 결과, 실행 정보, 수행된 쿼리 내역)
Query Editor에서 입력했던 쿼리문 저장 및 관리
사용자가 쿼리를 입력/실행하고, 결과를 확인/다운로드
- 요금 기준
대용량 데이터를 상주 위치에서 분석 기능 제공하는 Quick Query는 SQL쿼리를 통해 스캔한 데이터의 용량에 따른 과금이 발생합니다.
'BigData-DataAnalytics' 카테고리의 다른 글
| AI&MLOPS PLATFORM (0) | 2023.12.17 |
|---|---|
| AI/ML service (0) | 2023.12.17 |
| DATA WRANGLER (0) | 2023.12.17 |
| DATA FLOW (0) | 2023.12.17 |
| DATA OPS (0) | 2023.12.17 |