미리보기

분산 SQL 엔진 Trino를 활용한 DataQuery 서비스 초기 단계부터 개발 및 운영

클라우드 환경 클러스터 배포를 위한 Kafka 기반 배포 컴포넌트 개발

Redis를 활용한 쿼리 실행, 모니터링 컴포넌트 개발

Apache Iceberg REST catalog 개발

데이터 분석용 스토리지 서비스 개발

미국 B2B 쇼핑 서비스 FashionGo 개발

Stored Procedure 220개 중 180개 제거 및 API 전환

약 40개의 DB 구조 개선 및 컬럼 정리

모놀리스 서비스 MSA 아키텍쳐로 점진적 전환

Spring Boot, Java, Kafka

데이터 분석용 스토리지 서비스 기획, 설계 및 개발 주도

S3 API 호환 Core API 메인 개발

미터링, 스토리지 연동 등 전체 시스템 설계

Spring Boot, Java, MySQL

Iceberg 스터디를 주도적으로 진행하면서 Iceberg 데이터 소스 개발

Open API Specification에 맞춰 REST Catalog 개발

Partition 관련 Procedure 개발 및 스터디 진행

Spring Boot, Webflux, Java, Kafka

Kubernetes 환경에서 컨테이너 환경으로 전환 작업으로 인해 기존 사용하던 Argo Workflow 대체 필요

배포 과정을 Kafka 메시지로 매핑하여 Trino 클러스터를 배포하는 컴포넌트 개발

Trino, Java

Trino Web UI 쿠키 탈취 시 한 쪽에서 로그아웃해도 다른 곳에서 정상적으로 로그인되는 이슈 발견

쿠키 생성 시 메모리 캐시에 보관 후 로그아웃하면 해당 메모리 캐시 삭제하도록 Trino 코드 수정

도커 이미지 생성 시 수정 모듈 포함되도록 설정 및 사용

Python, Trino, Redis

Trino 쿼리를 실행, 결과 저장하기 위한 Python agent 개발

사용자가 쿼리를 실행하면 Redis 큐에 쿼리 정보를 저장하고 실행 agent가 주기적으로 polling

쿼리 결과 저장하는 agent는 해당 쿼리가 실행 완료되었는지 계속하여 확인하고 쿼리 결과를 NFS에 저장하도록 개발

Spring Boot, Webflux, Java, MongoDB, Trino, Argo workflow, Kubernetes, Docker

Trino 클러스터를 사용자에게 제공하는 서비스 개발 초기부터 참여

DB 설계 및 아키텍처 구성

배포 관련된 Kubernetes, Argo workflow, 인프라 세팅, 코드 개발

서비스 전체를 폭넓게 바라본 경험

미국에서 서비스 중인 B2B 패션 서비스 MSA 전환

기존 코드가 모놀리스 방식이어서 유지보수가 힘들고 관리 부채가 점점 커져갔음

팀원들과 MSA 스터디 및 Products 도메인 별도 API로 전환

테스트 커버리지 90% 이상 달성 후 API 하나씩 이전함

Spring Boot, Java, JPA

비지니스 로직이 90% 이상 Stored Procedure로 관리되고 있어서 유지보수에 어려움이 있었음

사용도, 영향도가 적은 Stored Procedure부터 DB팀과 더블 체크하며 순차적 전환

전체 220개 SP 중 180개 제거 및 전환 완료

Trino 코드 스터디 / 2022.10 ~ 2022.12

• 오픈소스 Trino 소스 코드 Deep dive

• 이후 서비스 운영하면서 에러 파악하는데 많은 도움이 됨

Iceberg 코드 스터디 / 2024.04 ~ 2024.06

• 오픈소스 Iceberg 소스 코드 Deep dive

• 스터디 내용 바탕으로 Iceberg REST Catalog 개발

분산 스토리지 솔루션 스터디 / 2024.06 ~ 2024.09

• 새롭게 런칭할 분산 스토리지 서비스를 위해 Apache Ozone, MinIO 등 분산 스토리지 솔루션 스터디

• 솔루션 별 장단점 및 소스 코드 스터디

Apache Arrow 스터디 / 2024.12 ~ 2025.01

• Apache Arrow 스터디 주도

• 소스코드 공부 및 테스트 진행

Hyperledger Fabric, SpringBoot, Java, AOS

정부지원 사업, 10기 연수생으로 참여

블록체인 오픈 서비스 기반 티켓팅 서비스

블록체인 클러스터 구축 및 모바일 어플리케이션 개발 담당

AWS 환경에 배포

서비스 정식 출시보다 블록체인을 스터디하는 것에 의의

ACM-ICPC라는 프로그래밍 알고리즘 경진대회에 출전해 학교 대표로 지역 본선에 출전

아쉽지만 본선에서 입상하지는 못함