• 1트랙 : 웹공학
• 2트랙 : 모바일소프트웨어
• 2022.03 - 2026.02

2025.08.01 - 2026.07.31 (1년)

문서 AI(OCR·VLM)와 음성 AI 제품을 개발했습니다. 모델 경량화·최적화부터 추론 엔진의 서비스 적용, 웹 서비스 기능 개발까지 제품의 전 구간을 담당했습니다.

• 모델 최적화 — PyTorch → ONNX 변환 및 INT8 양자화로 CPU 추론 성능 약 3배 개선, GPU 메모리 사용량 50% 절감. 실제 제품에 반영·출시
• 하드웨어 가속 — NPU 환경에서의 AI 워크로드 기술 검증(PoC) 수행
• 서비스 개발 — 추론 엔진을 FastAPI·gRPC·Flask 기반 API로 설계·구현, Ubuntu 환경에서 배포·운영
• 개발 프로세스 — 이슈 단위 브랜치 · 코드 리뷰 · PR/머지 사이클, 생성형 AI 개발 도구를 팀에 도입·표준화
• 국책 과제 — 정부 R&D 지원 사업의 기술 제안 및 문서화 참여

명함·신분증 등 정형 서식에서 항목을 추출하고, 비정형 서식의 학습 데이터 태깅부터 모델 학습·평가·배포까지 관리하는 통합 웹 서비스

• 서식분류(CLS) 기준 추론 대상 필터 기능을 설계·구현하고, 필터 적용 시 왜곡되던 평가 통계를 원본 카운트 기준으로 재정의해 정확도 지표 정합성 확보
• 학습 중 이상 감지 자동 중단 기능 구현 — 로그 offset 기반으로 이전 실행 로그를 제외해 OOM 오판 방지
• 웹 취약점 대응 — 다운로드 경로 Path Traversal 검증, 비관리자 사용자에 대한 에러 로그 마스킹을 공용 헬퍼로 통합해 엔드포인트별 누락 재발 방지
• VLM 엔진 연동 — 프롬프트 기반 추론 작업 및 VLM 유무에 따른 Docker 패키지 분기 처리
• 태깅 작업 키보드 단축키 UX 개선, AMP 적용, Ubuntu 22.04 지원
• Flask RabbitMQ RPC LayoutXLM VLM Docker

검출·인식·레이아웃 분석 파이프라인과 C++/Java SDK를 제공하는 OCR 엔진 본체

• ONNX 추론 지원을 인식기에 도입하고, SessionOptions(ORT_ENABLE_ALL·스레드 설정) 적용과 후보정 로직 제거로 추론 품질·속도 개선
• 인식기 양자화 품질 개선 — 모델을 분리해 레이어별 양자화 실험을 수행하고, GPU 환경에서 양자화 모델 검증
• CPU 버전 패키징 스크립트 작성 및 스타일 인식(밑줄·굵기 등) 지원을 위한 ONNX 추론 코드 구현
• Python ONNX Runtime Quantization

STT·화자 분리·감정 인식·화자 식별·TTS를 단일 서비스로 제공하는 음성 AI 제품

• LLM 연계 기능을 전담 설계·구현 — 전사문 기반 회의록 생성 API와 수사 녹취록 분석 API(태그 추출·5W1H·모순 탐지) 개발
• vLLM 엔진을 원격 연동 → 제품 내장 구동 → 단일 패키지 통합으로 단계적으로 발전시키고, LLM 모델 가중치 암호화를 적용해 납품 가능한 형태로 완성
• FastAPI gRPC vLLM WhisperX Pyannote

OCR 검출기·인식기를 CPU/NPU 환경에서 구동하기 위한 범용 최적화 파이프라인

• 경량화·최적화 작업을 독립 프로젝트로 분리하여, 재사용 가능한 범용 양자화 파이프라인과 워크플로우 문서를 구축
• PyTorch → ONNX 변환 및 INT8 양자화 적용, 스타일 인식 반영 변환 스크립트 개발
• ONNX INT8 Quantization PyTorch

모델 학습 데이터 확보와 성능 검증을 위한 도구 개발

• CRAFT — OCR 검출기 학습 파이프라인 관리 및 운영 / MOZART — OCR 인식기 학습 파이프라인 관리 및 운영
• SynthText_kr — 일본어 세로쓰기, 취소선·원문자 합성 데이터 생성 도구를 추가해 학습 데이터 다양성 확보

Category	Stack
Language
AI / ML
Backend
Infra
Frontend
Collaboration

Qualcomm · 한성대학교 캡스톤디자인 최우수상

• On-Device AI 기반 인생발자취 및 스마트 검색 서비스

Qualcomm · 한성대학교 캡스톤디자인

• 온디바이스 AI 기반 스마트 무인점포 통합관리 시스템

Qualcomm

• Qualcomm 주관 On-device AI 기반 다이어리 App 개발 프로젝트
  
• Kotlin | Android Studio

LG U+

• 스포츠 분야 이미지 인식 모델 연구 개발을 통한 자동 야구 중계 하이라이트 영상 생성

기업 UWS

• 분산원장(Distributed Ledger) 기반 BNPL(Buy Now, Pay Later) 결제서비스 적용을 통한 뉴 Biz 모델 사업화
• Figma | Remix IDE | ERC 20(Open Zeppelin)

공학경진대회

• Raspberry Pi Car를 활용한 자율주행 배달 서비스
• Kotlin | Android Studio

기업 솔트룩스 · 한국정보처리학회 ACK 2024 동상

• 언어적 · 비언어적 커뮤니케이션 분석 기반 실시간 면접 코칭 시스템
• Python | DjangoHTML
• Chat-GPT API | Google Mediapipe | Google Cloud Vision | Google STT

• 최우수상 — 한성대학교 캡스톤디자인 작품발표회 퀄컴 프로젝트 (2025) · 한성대학교 SW중심대학, Qualcomm
• 동상 — 한국정보처리학회 ACK 2024, 언어적·비언어적 커뮤니케이션 분석 기반 실시간 면접 코칭 시스템