미리보기

기술스택: Python, FastAPI, Airflow, Redis, Qdrant, FinBERT, LLM API, Prompt Engineering, Docker, AWS

경제 뉴스에서 핵심만 자동 큐레이션하는 실서비스 파이프라인 설계 및 운영
바쁜 직장인을 위한 경제 뉴스 큐레이션 시스템. 하루 수천 건 기사에서 핵심 정보만 선별·요약.

데이터 수집 및 파싱 자동화
– 13개 신문사의 RSS로부터 기사 자동 수집 및 파싱, BeautifulSoup + Factory 패턴 기반 커스텀 파서 13종 개발 – 수집부터 HTML 파싱까지 전 과정 자동화, 파싱 성공률 99.6%

중요도 기반 기사 선별
– FinBERT 파인튜닝으로 정밀도 93%, 재현율 96%의 경제 뉴스 분류기 개발
– 불필요 기사 약 40% 자동 필터링하여 LLM 호출 수를 대폭 감소
– LLM 기반 페르소나 3인 합의 키워드를 활용한 질의로 검색 정확도 개선, 하루 평균 1천 건 중 50건으로 압축

LLM 호출 최적화 및 중복 제거
– tiktoken 기반 Smart Batch 처리 시스템 구현 → API 응답속도 4.3배 향상 및 운영비 60% 절감 달성
– MinHash + LSH를 활용한 2단계 중복제거 시스템으로 F1 Score 1.0 달성, 벡터 검색 비용 98% 절감

실시간 큐레이션 및 배포
– Redis TTL 기반 우선순위 큐(ZADD) 설계, 중요도 + 신선도 기준으로 Top-5 기사 자동 큐레이션
– 중요 기사 사용률 70% → 95% 향상, 과거 콘텐츠 자동 제거로 최신 정보 유지

프롬프트 엔지니어링
– "20년 경력 경제 에디터" 역할 설정, JSON 포맷 출력 및 Few-shot 예시 제공
– 분류 정확도 77% → 94%, 평가 일관성 77% 개선(표준편차 0.62->0.14)
– 13개 신문사 실제 뉴스 데이터 300개 기준 A/B 테스트 검증

기술스택: Python, Kotlin, Android, Mediapipe, FastAPI

Android + MediaPipe 외주 인력 공백 상황에서, 일정 지연 없이 앱 개발을 완수하기 위해 직접 기능 개발 주도

모바일 실시간 분석 기능 개발
– 리서처가 작성한 Python 분석 코드를 Android에 직접 포팅, 손목 각도 실시간 추정 기능 개발
– MediaPipe Pose + Hand 모델을 Android 환경에 최적화하여 모바일에서도 피로 감지 가능

협업 기반 피드백 시스템 설계
– 작업치료사와 협업해 손목 피로 기준 수치화 → 실시간 피드백 + UI 흐름 설계
– 디자이너, 기획자와 협업하며 사용자 경험에 맞춘 UX 구조 반복 개선

긴급 상황에서의 리더십 경험
– Android 외주 인력 공백 상황에서 Android 경험 없이도 개발 리더십을 발휘해 프로젝트 일정 수호
– 실제 사용자 피드백 기반으로 기능 개선, 발표 및 데모 성공적으로 마무리

기술스택: Python, PySpark, Pandas, Geo Pandas, ELK Stack, Kafka, AWS EMR

한국의 이중 주소체계(지번/도로명/좌표/PNU) 정규화를 위한 오픈소스 데이터 파이프라인 설계 및 배포

ETL 구조 설계 및 정규화 엔진 개발
– 반복 구현되던 GIS 주소 정규화 로직을 PyPI 패키지로 범용화로 조직 간 중복 개발 제거
– 실무 데이터 기반 UDF 15종, 비정형 주소 파서, 좌표→PNU 매핑 엔진 직접 개발

성능 최적화 및 실시간 처리 구조 구축
– PyArrow 기반 마이크로배치 최적화로 좌표 연산 속도 3배 개선 (15.6s → 5.2s)
– 병목이였던 Kinesis를 Kafka로 교체 후 초당 3만 건 주소 정규화 가능한 실시간 RDW 구조 설계
– EMR + Kibana 기반 실시간 시각화 데모 구현으로 데이터 흐름 검증 완료

협업 기반 구조 개선 및 성장 경험
– 팀원 제안(H3 좌표 시스템, 테이블 자동 매핑 등)을 구조 설계에 반영하며 핵심 성능 개선
– Spark와 GIS 도메인 비전문가였지만 협업 기반으로 구조 설계 및 최적화 주도
– 프로젝트 종료 시 팀원에게 "가장 성장한 개발자"로 평가받음

– 실시간 영상 스트리밍 백엔드 / 손목 분석 앱 개발
– MediaPipe 기반 AI 모델 Android 연동 및 백엔드 설계