AWS SAA-C02개념정리::대량 데이터 처리(Kinesis,Redshift등)
1. 관련 서비스들 -S3, Glacier, Kinesis, Glue, EMR, Athena, QuickSight, Redshift 등 2. 데이터 웨어하우스 -데이터 웨어하우스: 이용 용도에 따른 데이터를 모아 활용 -데이터수집:목적별 데이터(필요한 데이터만 추출 및 수집)수집. 구조화 데이터 중심. -데이터축적:필요한 데이터만을 추출 및 축적 -데이터처리,가공:관련된 데이터 구조(스키마)로 변환, 축적, SQL에 의한 조작 -가시화분석:이용자가 데이터 분석/리포트 내용 등의 이용목적을 사전에 정하여 구축. 3. 데이터 레이크 -데이터 레이크: 가능한 한 가공하지 않은 데이터를 저장(텍스트, 영상, 이미지, 음성, 위치데이터등등) -데이터수집:미가공 데이터+목적별데이터.구조화/반구조화/비구조화 데이터...
2021. 6. 17.