oozie

팔로워 8 명

사람

프로젝트

Oozie기반의 Data Pipeline구축
 
2018년 4월 - 2018년 6월 
Oozie기반의 Data Pipe라인을 구축하여 RDBMS에서 Hive로의 데이터 ETL및 그 결과물을 다시 RDBMS에 적재하는 파이프라인을 구축함
임규찬  데이터 엔지니어 @넷마블
빅데이터 분석 플랫폼 운영 프로젝트
 
2017년 11월 - 2019년 10월 
'빅데이터 분석 플랫폼 재구축 및 증설' 프로젝트 종료 후, 해당 클러스터를 운영하는 프로젝트 입니다. 현재, 증설하여 220 여대 규모의 클러스터의 최적화, 추가개발, 트러블 슈팅등의 업무를 하였습니다.
이곤호  데이터 엔지니어 @한화생명
빅데이터 분석 플랫폼 재구축 및 증설 프로젝트
 
2017년 6월 - 2017년 11월 
VM 환경의 327 대 클러스터를 Dedicated 200 대의 서버로 이전하여 속도 및 용량의 이슈를 해소하기 위한 프로젝트 입니다. 해당 클러스터는 BDAP(Big Data Analytics Platform)이라는 빅데이터 분석 플랫폼으로 데이터 보관 및 분석 용도로 활용하는 클러스터 입니다.
이곤호  데이터 엔지니어 @한화생명