Projects

제가 개발한 프로젝트들과 스킬셋 포트폴리오입니다.

엔터프라이즈 검색 운영 최적화 및 인프라 표준화

🏢 검색엔진(Xten) 엔지니어 (데이타솔루션)

40여 개 이기종 사이트의 검색 요구사항 처리와 신규 컬렉션 구축 프로세스를 규격화하고, 성능/오류 이슈 대응 파이프라인을 정립하여 운영 거버넌스 확보

  • Java
  • MySQL
  • Linux
  • Bash Shell
  • Search Engine
  • Postgres
  • Oracle
  • Jdbc

대규모 분산 크롤링 플랫폼 운영 고도화] 다채널(SNS/포털) 수집 엔진 추상화 및 고가용성 무중단 운영 체계 구축

🏢 대용량 소셜 데이터 분산 수집 플랫폼(Opinion Mining Flatform) 개발/운영 (데이타솔루션)

60대 규모 분산 크롤러의 다채널(트위터, 인스타그램, 포털 등) 수집 파서를 추상화하여, 잦은 채널 UI 변경 및 차단 이슈에도 전체 시스템 중단 없이 유연하게 대응하는 무중단 운영 거버넌스 확립

  • Java
  • HBase
  • Crawling
  • Linux
  • HDFS