데이터 수집 및 전환1. 데이터 수집 기술기술 설명 ETLExtraction, Transformation, Load. 데이터를 수집·정제·적재하는 3단계 방식 (DW, DM, ODS에 저장)ETL의 유형: Batch ETL, Real-Time ETL대용량 데이터 처리를 위해 MPP(병렬처리 프로세스)지원FTP네트워크 간 파일 전송을 위한 통신 프로토콜API프로그램 간 데이터 전송 인터페이스SqoopRDBMS ↔ Hadoop 간 대용량 데이터 이동 도구웹 크롤링웹 페이지에서 데이터를 자동으로 수집하는 기법💡 ETL은 데이터 이동과 정제의 핵심 도구!2. 데이터 유형 및 속성 파악데이터 성격별 구분 분류 내용 예시 정성적특징을 언어로 설명주관식, 기상특보정량적수치화된 정보온도, 풍속 데이터 형태별 ..