[업무 내용]

• 데이터 레이크 및 데이터 파이프라인 설계, 개발 및 운영

• 데이터 분석용 플랫폼 도입 및 운영

• 대용량의 원천 데이터를 수집하여 분석이 용이한 데이터로 정제, 가공 처리

• 데이터 리포팅 및 시각화 구현​

[자격 사항]

• 빅데이터 개발 또는 분석 경력 3년 이상

• 데이터 처리 프로세스 수립 및 Data Architecture 수립 경험

• 실시간 및 배치 데이터 처리 경험

[우대 사항]

• AWS 클라우드 환경 내에서 개발 및 운영 경험

• ELK 스택 기반 데이터 수집 및 분석 파이프라인 구축 경험

• Kafka Streams, Flink, Spark 등 Stream processing 경험

• Redshift 등 데이터 웨어하우스 운영 경험

• Airflow, Kubeflow, MLflow 등 workflow 경험