Data Engineer · SEOUL · 2026
PassionChallengeSincerity
정성주 · Data Engineer.
계획적이고 완수에 헌신하는 엔지니어로, 팀 협업 능력을 통해 지속적인 성과를 창출합니다.
문제 해결에 대한 열정과 관심으로, 고객과 회사의 기대를 넘어서는 솔루션을 제공하고자 합니다.
데이터 수집부터 파이프라인 설계·운영까지, 신뢰할 수 있는 데이터 흐름을 만드는 일에 관심이 많습니다.
Data Collection
reliable by design
외부 데이터를 안정적으로 수집하는 시스템을 설계·구현하고 운영합니다.
Data Pipelines
clean, then load
서비스에 필요한 데이터를 수집·정제·적재하는 파이프라인을 설계하고 운영합니다.
Resilience & Retry
fail gracefully, retry smart
연결 오류, 타임아웃 같은 다양한 실패 유형을 분석해 재시도 조건과 횟수를 세분화하고, 장애가 전체 파이프라인으로 번지지 않도록 설계합니다.
Infra as Code
reproducible by default
AWS Glue 기반 스크립트로 데이터 인프라를 구성하고, 채널별 파이프라인을 독립적으로 운영하며 데이터 정합성을 코드로 검증합니다.
Data Quality & Analysis
trust, but verify
집계 쿼리로 채널별 성공률을 분석하고, OCR 오인식이나 지표 중복 같은 품질 이슈를 찾아 교정합니다.
ML Serving
draft, then prove it
사내에서 만드는 모델을 서빙하는 구조를 설계하고 있습니다. FastAPI로 초안을 구현해봤고, 지금은 BentoML 기반으로 PoC를 진행하며 적합한 방식을 검증하는 중입니다.
프로젝트
학교와 취업 준비 기간 동안 진행한 프로젝트입니다.
주요 프로젝트
2025.04 – 2025.06
AI 챗봇 기반 전월세 부동산 추천 플랫폼 — 8개 마이크로서비스를 AWS EKS에서 운영
5명 (본인 — 풀스택·인프라·DevOps 담당, 데이터 2명, AI 2명)
- AWS EKS 클러스터 구축·운영, Helm 기반 8개 마이크로서비스 배포 및 Prometheus·Grafana 모니터링 구축
- 매물 이미지 315,359장을 네이버 CDN 의존에서 S3로 마이그레이션해 검색 응답시간 1초 이내로 단축
- FAISS 추천 Pod 메모리 부족 문제를 PVC 캐시 도입·리소스 조정으로 해결해 재시작 없이 안정 운영
- Spring Boot API·FastAPI 챗봇 개발, OAuth2 소셜 로그인 안정화로 인증 오류율 95% 감소
그 외 프로젝트
E-commerce Data Pipeline
2025.12가상의 전자상거래 데이터를 기반으로 한 클라우드 기반 데이터 파이프라인 구축 프로젝트
Trimm
2024.09 – 2024.12사용자 맞춤형 검색 결과 제공과 API 호출 비용 최적화를 목표로 한 위치 기반 서비스
The portrait
경력
데이터 엔지니어링, AllraFintech
2026.02 – present
데이터 파이프라인 설계 및 운영
- 데이터 수집부터 적재까지의 ETL 파이프라인 설계 및 구현
- 데이터 소스 및 비즈니스 요구사항 변경(정산 기준 API 교체, 신규 정산 정책 도입 등)에 따른 파이프라인 로직 개선 및 데이터 정합성 확보
- 신규 데이터 소스를 위한 파이프라인 구축 및 기존 파이프라인 구조 개선을 통한 중복 제거와 유지보수성 향상
- 배치 스케줄링, 모니터링 및 장애 대응 체계 구축을 통한 안정적인 데이터 파이프라인 운영
- 파이프라인 장애 유형 분석 및 재시도 전략 개선을 통한 운영 안정성 향상
데이터 수집 시스템 개발 및 운영
- 다양한 데이터 소스의 구조 분석 및 데이터 수집 시스템 설계·구현
- 신규 데이터 소스 연동을 위한 인증 및 데이터 수집 프로세스 개발
- 수집 시스템의 성능 및 안정성 향상을 위한 운영 환경 개선 및 유지보수
- OCR 등 데이터 인식 기술 적용을 통한 데이터 수집 품질 향상
학력
한국항공대학교 | 소프트웨어학과
2023.03 – 2025.08 (졸업)
- 전체 학점: 3.92 / 4.5
- 전공 학점: 3.94 / 4.5
교육
자격증
정보처리기사
2025.06.13
ADsP (데이터분석 준전문가)
2025.03.21
SQLD (SQL Developer)
2024.06.21
TOEIC Speaking — Intermediate Mid 3
2025.08.30
기술
활동 & 수상
KOALA | Algorithm
2023.03 ~
한국항공대학교 KOALA 알고리즘 학회 부원 활동
UMC | Development
2023.09 ~
Uni MakeUs Challenge 5기 부원 활동
한국항공대학교 2023년 2학기 산학프로젝트
학장상 수상 (1등)