AWS Glue + AWS Glue Studio + Redshift + Athena + QuickSight
Glue AWS Serverless Data Catalog & ETL Service ETL Terms Meta Data : 데이터의 위치, 파일 형식, 압축 유형, 레코드 크기, 레코드 수, 컬럼 타입 Data Catalog : 메타 데이터 저장소, 메타 데이터를 이용하여 보통의 테이블처럼 접근 Crawling : 정형, 비정형, 반정형 소스 데이터로부터 Data Catalog 생성하는 작업 ETL : 추출 (Extract), 변환 (Transform), 적재 (Load) 작업 – 실제 분석의 전단계 Database & Table : 메타데이터를 table 형태로 저장한 객체 및 저장소 Job : Crawling 또는 ETL 실행 작업 Workflow : 연속적인 Job 의 묶음 Glue: Data Ca..
2023. 6. 29.