Jeong Hwa Park Email and Phone Number

New construction/operation of DataLake (Apache hadoop ecosystem - opensource)Current WeMakePrice Data Lake Team Leader

Extensive Experiences in Developing and Operating Hadoop, HBase and apache-storm Systems. In-depth Knowledge and Skills of Developing and Operating MongoDB System and Machine Learning System using Tensorflow.Expertise to Develop Large-scale Data Distributed Processing and Image Processing.Interpersonal Skills to Build Strong and Comprehensive Relationship to Cooperate with Related Teams and Business Partners and Communicate with Senior Management.

- 검색 및 크롤 시스템을 위한 성인 이미지 판별 시스템 설계 및 구축. 학습을 위한 데이터 확보 및 가공, 학습, API 구축. 품질 측정 결과 95%의 정확도(성인 혹은 노출이 심한 이미지 검출)를 지닌 것으로 나타남.- 신규 동영상 SC 구축을 위해 Storm 과 Kafka 를 사용한 분석 플랫폼 구축. 랭킹에 유효한 영항을 끼치는 요소 검증. 색인 및 분석 시스템 구축- 뉴스 SC 분석 클러스터 구축. DBSCAN 알고리즘을 사용하여 클러스터링 데이터셋 확보, 데이터의 특징을 분석하여 같은 기사를 실시간으로 그룹핑 할 수 있는 신규 알고리즘 개발 및 서비스 적용. 또한 썸네일의 유사도를 측정하여 같은 썸네일이 검색 결과에 노출 되지 않도록 하는 알고리즘 개발 및 서비스 적용.- 웹 페이지 스냅샷을 캡춰하고 각각의 이미지들의 유사도를 비교하여 스팸 및 성인 도메인을 검출할 수 있는 시스템 설계 및 구현. 해당 시스템 기획 및 DB 스키마… Show more - 검색 및 크롤 시스템을 위한 성인 이미지 판별 시스템 설계 및 구축. 학습을 위한 데이터 확보 및 가공, 학습, API 구축. 품질 측정 결과 95%의 정확도(성인 혹은 노출이 심한 이미지 검출)를 지닌 것으로 나타남.- 신규 동영상 SC 구축을 위해 Storm 과 Kafka 를 사용한 분석 플랫폼 구축. 랭킹에 유효한 영항을 끼치는 요소 검증. 색인 및 분석 시스템 구축- 뉴스 SC 분석 클러스터 구축. DBSCAN 알고리즘을 사용하여 클러스터링 데이터셋 확보, 데이터의 특징을 분석하여 같은 기사를 실시간으로 그룹핑 할 수 있는 신규 알고리즘 개발 및 서비스 적용. 또한 썸네일의 유사도를 측정하여 같은 썸네일이 검색 결과에 노출 되지 않도록 하는 알고리즘 개발 및 서비스 적용.- 웹 페이지 스냅샷을 캡춰하고 각각의 이미지들의 유사도를 비교하여 스팸 및 성인 도메인을 검출할 수 있는 시스템 설계 및 구현. 해당 시스템 기획 및 DB 스키마 구축, 분석 시스템, 웹 페이지 구축을 비롯한 모든 부분을 구현- 인물 SC 구축에 필요한 썸네일을 주어진 옵션에 따라 얼굴 인식을 사용하여 자동으로 Crop, Resize 를 수행하는 server 형태의 프로세스 구축- Web 검색 색인 반영 속도 개선. 기존 최대 100일이 소요되는 색인 반영 속도를 장비의 증성/교체 없이 OS튜닝/Hadoop/Flow 의 변경으로 1일로 단축시킴. Blog 검색 신규 플랫폼 리서치 및 구축 - 회사 내에서 최초로 Hadoop 2.x 의 안정적인 도입으로 이후 Hadoop 플랫폼의 기준이 됨. - 썸네일에서 주목받는 영역을 제외한 불필요한 부분을 제거, 확대하여 표시(Saliency Map) 할 수 있는 알고리즘 및 시스템 개발. 해당 기술을 사용하여 모바일 뉴스 썸네일 생성.- URL Normalization 을 위한 후보군 추천 및 패턴 등록 시스템 설계 및 구축.- 분석과 크롤 시스템에서 사용하는 Hadoop, HBase 시스템 안정화. 모니터링을 위한 Ganglia 도입. 원인 불명의 프로세스 종료 원인 파악 및 시스템의 병목구간 파악 및 개선. Show less

- 위메프, 티켓몬스터, 그루폰에서 소셜 상품의 정보를 조회하여 사용자가 핸드폰에서 선택하면 ARS로 해당 매장에 예약을 할 수 있는 시스템 개발 - Android 앱 개발- 레스토랑 예약 및 관리 시스템 개발. DB 스키마 설계, API 서버, 레스토랑 Management 앱 개발. 운영에 필요한 각종 웹 어드민 개발

- host별로 접근을 미리 스케줄링하여 크롤러의 효율을 높일 수 있는 URL Pool 알고리즘 설계 및 시스템 개발- 이미지로 검색하는 사물검색의 색인 생성 시스템 개발. 신규로 들어온 데이터만 처리하여 색인을 생성할 수 있도록 설계 및 개발. - IPhone 및 Android 앱 정보를 검색할 수 있도록 마켓에서 앱 정보를 수집, 가공, 업데이트하는 앱 크롤러 개발