팀원
CurrentJupyter Hub 분석환경구축 및 운영- Jupyter Hub, Conda 환경 구축- 사용자 계정 생성 및 사용자별 디렉토리 권한 관리- 사용자별 PySpark 커널 구축 및 Spark 클러스터 연동- 사내 Git Lab 연동- 패스워드 만료 Teams 알림봇 API 콜 스크립트 개발Location Profile Application 개발- 위치정보 모니터링 시스템 개발 Backend단 controller, service, data class API 개발(Kotlin)- H3좌표 지도(Kepler) 시각화 및 ant chart, ant design 컴포넌트 front단 개발(React-Type Script)- 개발환경 Hadoop, Hive 구축 및 spring <-> Hive Jdbc 연동- Hive 성능 저하로 인한 Trino 클러스터 연동시각화용 데이터 마트 구축 및 Power BI 시각화- 주행, 실적, 자동차 보상 등 Power BI 시각화용 마트 구축- Power BI 리포트 개발Azure HD Insight Spark 클러스터 운영- file, RDB 데이터 수집(Azure CLI, Sqoop) 및 DW, DM 구축(Hive)- Spark 코드 튜닝 executor-cores, executor-memory, num-executors 조정 및 Spark Shuffle Partition 최적화- Oozie 스케쥴러 개발 및 운영- Ambari, Yarn 모니터링 및 클러스터 장애 조치