Projects
다국어 화상회의 서비스
2026.10 ~ 현재
코스모스 트랜스퍼 미팅 (데스크톱 · 모바일 · 웹)
참가자가 각자 자기 언어로 말하면 실시간 번역 자막이 붙는 화상회의 서비스. 데스크톱 앱, 모바일 앱, 브라우저 참가와 회의용 서버 API까지
- 역할
- 전체 개발 (앱 · 회의 서버 API)
- 기술
- Electron, React, TypeScript, Flutter, LiveKit(SFU), Soniox STT, WebSocket, PHP
성과데스크톱 0.1.1 ~ 0.1.5 macOS · Windows 배포, 웹 참가(/meet/{코드}) 제공
실시간 번역 자막 중계
- 확정 문장을 참가자마다 고른 자막 언어로 번역해 중계 (약 50개 언어)
- 회의록·AI 요약, 회의 중 AI 탭(2분 주기 자동 요약, 근거 표시, 놓친 내용 질문)
회의 서버 API
- LiveKit Egress 기반 회의 클라우드 녹화: 계정별 저장 용량·보관 기간 정책과 자동 정리, 10분짜리 서명 URL로 재생·구간 탐색·내려받기
- 회의 중 AI 응답을 언어별로 캐시하고 동시 요청은 한 번만 생성
- LiveKit 권한 기반 호스트 제어 (스포트라이트, 음소거 요청)
녹화 · 예약 · 배포
- 클라우드·로컬 녹화와 이어 올리기, 회의 예약(.ics, Google 캘린더, 5분 전 알림)
- Windows 설치본을 Squirrel에서 NSIS + electron-updater로 전환
- 모바일: LiveKit 방, Android 화면 공유(MediaProjection), 태블릿 레이아웃, 4개 언어 UI
트러블슈팅
문제 · 마이크를 켰는데 계속 음소거
마이크 트랙을 올리는 도중에 켜면 꺼진 상태로 게시되어 상대에게 소리가 가지 않았다.
해결 · 게시 완료 후 상태 재적용
트랙 게시가 끝난 뒤 사용자가 마지막으로 고른 마이크 상태를 다시 적용하도록 바꿨다.
문제 · Android 회의 시작 시 앱 종료
회의를 시작하는 순간 Android 앱이 꺼졌다. 포그라운드 서비스 타입과 권한 처리가 맞지 않았다.
해결 · 서비스 타입·권한 정리
화면 공유·마이크 용도에 맞는 포그라운드 서비스 타입을 선언하고 권한을 먼저 받은 뒤 서비스를 시작하게 했다.
PC 실시간 자막 앱
2026.10 ~ 현재
코스모스 트랜스퍼 캡션
강의실의 학생·교수와 일반 사용자가 함께 쓰는 PC용 실시간 번역 자막 앱. 강의 코드로 들어가 자막을 받고, 교수는 강의실 모니터에 자막을 띄우며 질문을 받고, 로그인하면 내 PC 소리로 바로 자막을 만든다
- 역할
- 전체 개발
- 기술
- Electron, React, TypeScript, WebSocket, Soniox STT
성과0.1.0 ~ 0.1.2 macOS · Windows 배포
강의 자막 수신과 질문 (청중)
- 6자리 코드·QR로 로그인 없이 입장해 발표자가 정한 언어의 자막 수신
- 자막과 같은 WebSocket으로 질문 보내기, 참가 이름·익명 순번, 전송 실패·제한(빈 값·300자·5초 간격) 처리
교수 모드
- 진행 중 강의 보기, 실시간 질문 수신·띄우기·답변 완료, 지난 강의 자막·질문 기록과 텍스트 저장
- 강의실 모니터마다 자막 창을 따로 띄우고 언어별 칸·위치·글자 설정을 모니터별로 저장, 화면 위에서 직접 크기·위치를 조정하는 모드
내 PC 소리로 자막 만들기
- 시스템 오디오를 캡처해 음성 인식 → 번역 → 자막 창으로 이어지는 파이프라인
보안을 고려한 인증 구조
- 액세스 토큰은 메인 프로세스에만 두고 refresh는 HttpOnly 쿠키로 처리해 화면 코드에 토큰이 노출되지 않게 설계, 질문 본문은 로그에 남기지 않음
번역 제품군 확장
2026.10 ~ 현재
트랜스퍼 글래스 · for Zoom · 강사 목소리 TTS · 듀엣
하나의 실시간 번역 엔진을 여러 기기와 플랫폼으로 넓히는 신규 제품 개발
- 역할
- 전체 개발 (프로토타입 ~ 초기 개발)
- 기술
- Flutter(Android), Zoom RTMS, Python, FastAPI, Qwen3-TTS, Docker(GPU), Electron
성과스마트 글래스·Zoom·TTS 프로토타입 완성, 상담 창구용 양면 번역 키오스크 개발 착수
스마트 글래스 자막 (XREAL 1S)
- 폰과 안경에 Flutter 엔진을 각각 띄우고, 폰이 상태를 보내면 안경은 그리기만 하는 구조로 설계
Zoom 회의 번역 자막
- Zoom RTMS WebSocket 프로토콜을 직접 구현해 회의 음성을 번역 자막으로 변환
강사 목소리 TTS 서버
- Qwen3-TTS + FastAPI를 RTX 4090 Docker에서 서비스, 번역 자막을 강사 목소리로 읽어 줌
상담 창구 양면 번역 키오스크
- 직원 화면과 고객 화면을 나눈 Windows 키오스크 앱 설계·개발 중
트러블슈팅
문제 · TTS GPU 메모리 부족
요청이 몰리면 GPU 메모리가 바닥나 서버가 멈췄다.
해결 · 캐시 해제와 503 응답
요청마다 GPU 캐시를 해제하고 worker를 1개로 고정했으며, OOM이 나면 서버를 죽이지 않고 503을 돌려주게 했다. 문장 끝 음절이 잘리는 문제는 끝에 200ms 무음을 붙여 해결했다.
녹화 키오스크 & 통합 관리 서비스
2026.10 ~ 현재
이서당 3.0
학원용 강의 녹화 키오스크를 .NET WinForms에서 Electron으로 다시 만들고, 여러 학원 키오스크를 원격으로 관리하는 서버·웹을 구축
- 역할
- 전체 개발 (키오스크 앱 · 관리 서버 · 관리 웹)
- 기술
- Electron, TypeScript, go2rtc, RTSP, Node.js, Tailscale
성과v3.0.33 ~ 3.0.39 배포, 라이선스 서버 자동 업데이트, macOS Developer ID 서명 빌드
원격 관리 구조
- 키오스크가 관리 서버에 먼저 접속하는 구조로 바꿔 학원 공유기 포트를 열지 않고도 원격 화면 보기·조작, 설정 변경, 재부팅 가능
- Tailscale 자동 등록과 4via6 경로 광고로 현장 네트워크 접근
녹화와 업데이트
- go2rtc로 RTSP 카메라 미리보기 중계
- 녹화 중이 아니고 10분간 입력이 없을 때만 조용히 설치되는 자동 업데이트
- AS 작업 관리 기능
AI 개발 비서
2026.10 ~ 현재
LABY 개발 비서
노션 Task를 AI 에이전트가 받아 코드 수정, 리뷰 에이전트 판정, PR 생성, 노션·Slack 보고까지 처리하는 사내 AI 개발 시스템과 macOS 메뉴 막대 앱
- 역할
- 기획 · 전체 개발
- 기술
- Node.js, TypeScript, Claude Agent SDK, Notion · GitHub · Slack API, Docker, Electron
성과사내 저장소에서 개발팀·문서팀 AI 에이전트가 실제 커밋·PR을 만드는 운영 단계
에이전트 실행 구조
- Task마다 git worktree를 만들어 격리 실행, 머지 충돌이 나면 최신 main 위에서 다시 작업
- 작업 → 리뷰어 에이전트 판정 → 위험 등급에 따른 자동 머지 또는 사람 검토
안전장치와 보고
- 에이전트 금지 행위 가드
- 보고서용 화면 캡처를 작업 전·후·디자인끼리 픽셀 비교해 바뀐 곳을 표시
관련 링크 ↗
실시간 음성 번역 어플리케이션
2026.07 ~ 현재
코스모스 트랜스퍼 (모바일)
실시간 음성 인식·번역 기반 양방향 통역 모바일 앱, 코스모스 트랜스퍼 제품군의 모바일 라인업 (유비온 협업)
- 역할
- 전체 개발
- 기술
- Flutter, 실시간 STT/번역 SDK, WebSocket, SQLite
성과iOS·Android 양대 플랫폼(App Store / Google Play) 정식 출시, 1.0 → 1.3까지 지속 업데이트
실시간 양방향 통역 기능 개발
- 마이크 음성을 실시간 STT/번역 SDK에 스트리밍해 두 언어 자막을 동시 생성
- 화면 상단을 180° 회전해 마주 앉은 상대가 자막을 바로 읽도록 구현
원격 2인 세션(Room) 및 딥링크 참가 구현
- 방 코드/QR로 두 기기를 자체 WebSocket 릴레이로 묶어 통역 결과를 중계하는 원격 세션 개발
- Universal/App Link·QR 스캐너·수동 코드 입력 세 경로를 하나의 참가 파이프라인으로 통합
세션 인증 및 연결 안정성 처리
- refresh token 기반 자동 재발급을 API 진입점 한 곳에서 처리해 세션 끊김 없이 유지
- 수신 트래픽을 하트비트로 활용하는 워치독으로 연결 끊김을 감지해 경고 표시
대화 기록 저장·재생 및 다국어/반응형 UI
- 세션 텍스트·오디오를 로컬 SQLite에 저장하고 원어/번역 탭 전환·오디오 구간 재생 지원
- 5개 언어(한/영/일/중/태) UI·다크모드와 화면 폭 기준 태블릿 반응형 레이아웃 적용
강의·발표 모드와 1.x 업데이트
- 포털 강의 API와 청중 WebSocket으로 강의·발표 자막을 청중에게 중계하고 질문 수신
- 강의 녹음·다시보기·업로드, iOS Live Activity, 시간제 사용량 화면
- 세션·소켓 단위 테스트와 GitHub Actions CI, Sentry 도입
트러블슈팅
문제 · 연결 중 세션 종료 시 크래시
음성 인식 서버와 핸드셰이크하는 도중에 세션을 닫으면, 이미 닫힌 스트림에 오디오를 쓰면서 앱이 종료됐다.
해결 · 종료 상태 확인 후 쓰기
스트림 종료 여부를 먼저 확인하고 핸드셰이크 완료 전에 닫히면 대기 중인 쓰기를 버리도록 고쳤다.
RAG 플랫폼
2026.06 ~ 현재
DScovery-RAG
온프레미스 로컬 LLM과 RAG를 결합해 강의 자료 기반 AI 챗봇 및 LMS 학습 지원 기능을 제공하는 솔루션 (삼성전자 DS부문 사내 학습 플랫폼 DScovery AI 고도화 프로젝트 / 유비온 협업)
- 역할
- 전체 개발
- 기술
- Next.js, Node.js, LangChain, PostgreSQL(pgvector), Ollama
성과강의 자료 기반 AI 챗봇 및 LMS 학습 지원 기능 개발
강의 자료 기반 RAG 챗봇 개발
- 로컬 LLM에 RAG를 결합하여, 강의 자료를 검색·참조해 해당 강의 내용에 근거해 답변하는 AI 챗봇 구현
- 강의 맥락을 벗어난 임의 답변 대신 실제 자료에 기반한 신뢰할 수 있는 응답을 제공하도록 설계
LMS 학습 지원 AI 기능 개발
- 강의 자료를 기반으로 학습을 돕는 AI 기능 개발 (퀴즈 자동 생성, 구간 해설, 이해도 체크, 추천 질문 등)
문서 임베딩 파이프라인 및 온프레미스 LLM 환경 구성
- 강의 자료를 파싱·청킹 후 임베딩하여 pgvector에 저장, 질의 시 유사도 검색으로 관련 자료를 찾는 RAG 파이프라인 구축
- 외부 API 없이 폐쇄망에서 동작하도록 Ollama 기반 로컬 LLM 환경 구성
관련 기사 ↗
실시간 음성 번역 프로그램
2025.10 ~ 현재
코스모스 트랜스퍼 (소프트웨어 설치형)
강의자의 음성을 실시간으로 텍스트 변환 후 다개국어로 번역하는 AI 번역 솔루션
- 역할
- 전체 개발
- 기술
- Electron, React.js, Node.js, TypeScript
성과재학생 100%가 외국인인 대학에 도입, 4개 국어 실시간 번역 자막 제공 · 1.3.x 배포와 첫 macOS 버전 출시
Electron 기반 전체 아키텍처 재설계 및 개발
- 기존 Python/gRPC로 구성된 디스플레이 프로그램을 Electron 단일 스택으로 처음부터 재설계
- 제어 프로그램과 화면 프로그램을 하나의 통합 구조로 개발 및 유지보수
자동 업데이트 및 배포 파이프라인 구축
- 신규 버전마다 사용자가 직접 재설치해야 하던 문제를 해결하기 위해 electron-forge 기반 빌드·패키징·배포 파이프라인 구성
- 앱 실행 시 최신 버전을 자동으로 감지·설치하는 자동 업데이트 구현
- 사내 라이선스 서버를 통한 Squirrel 기반 RELEASES·nupkg 배포
- electron-forge publish를 라이선스 서버와 연동하고 macOS 서명·배포까지 확장
안정성과 품질
- 음성 인식 연결이 끊기면 자동 재시도·재연결하고, 버려진 오디오만큼 자막 시각을 보정
- 로그에 남는 토큰·키를 일괄 마스킹, vitest 단위 테스트와 CI 도입
트러블슈팅
문제 · 정지·언어 전환 시 마지막 문장 유실
강의를 멈추거나 언어를 바꾸는 순간 아직 확정되지 않은 마지막 문장과 번역이 사라졌다.
해결 · 확정 대기 후 종료
연결을 끊기 전에 마지막 확정 문장과 번역 결과를 기다렸다가 내보낸 뒤 닫도록 순서를 바꿨다.
문제 · macOS 서명 실패
Windows에서 커밋된 entitlements plist의 줄바꿈(CRLF) 때문에 codesign이 인증서 오류처럼 보이는 실패를 냈다.
해결 · .gitattributes로 LF 고정
plist를 LF로 고정하는 .gitattributes를 추가해 어느 OS에서 커밋해도 서명이 깨지지 않게 했다.
관련 기사 ↗
실시간 음성 번역 프로그램
2025.04 ~ 2025.09
코스모스 트랜스퍼 (설치형)
강의자의 음성을 실시간으로 텍스트로 변환 후 다개국어로 번역하는 AI 번역 솔루션
- 역할
- 유지보수 및 개발
- 기술
- Electron, React.js, Node.js, Python
성과강의 진행 안정성 및 사용자 편의성 70% 이상 향상
강의 중 입력 소스 변경
- 언어 인식 AI의 입력 소스가 강의 시작 시 고정되어 여러 언어로 입력할 수 없던 문제
- 강의 언어를 바꾸면 기존 gRPC 연결을 끊고 해당 언어로 재연결하는 로직 추가
.wav 파일을 .mp3로 변환
- 세션을 일시정지할 때마다 .wav 음성 파일이 새로 생기던 문제
- 일시정지 시 .wav 파일을 백업·병합하여 마지막에 강의 전체 mp3를 내려받을 수 있게 설계
번역 화면·제어 프로그램 개발 및 유지보수
- 제어 프로그램: Node.js, Electron, React.js
- 화면 프로그램: Python, gRPC
CDN 솔루션
2024.05 ~ 2024.12
LABY-CDN
삼성전자 DS 교육관리시스템(LMS)의 콘텐츠 캐시를 관제하고 약 60대의 서버를 로드밸런싱하기 위한 솔루션
- 역할
- 서비스 전체 구조 설계, 프론트엔드·백엔드 개발, 비디오 캐시 관리 및 IP 기반 URL 리디렉션 구현
- 기술
- Wowza Streaming Engine, Apache, Nginx, PHP, Node.js, WebSocket
성과콘텐츠 캐시 관제 시스템 도입으로 동영상 재생 품질 80% 향상
사업장 서버 상태 실시간 통신
- WSS로 각 동영상 서버와 상태 표시 서버를 연결해 상태를 실시간 표출
- 스트리밍 상태(Wowza)를 조회하여 서버 정상 유무 판단
IP 기반 URL 리디렉션
- 클라이언트 IP 기준 가장 가까운 사업장의 동영상 URL 반환
- 사업장 정상 유무를 판단해 가장 가까운 정상 사업장으로 반환
프론트엔드 및 백엔드 개발
- 프론트: HTML, CSS, Vanilla JS
- 백엔드: PHP, Node.js
트러블슈팅
문제 · NAS 과다 호출 우려
새로 등록된 동영상을 처음 조회할 때 모든 사업장이 NAS에서 동영상을 가져가 트래픽이 몰리고 캐싱이 제대로 되지 않을 것으로 판단했다.
해결 · 지역별 Nginx 캐시 서버
사업장 지역마다 Nginx 캐시 서버를 증설하고 Reverse Proxy를 적용했다.
의료평가 디브리핑 솔루션
2023.04 ~ 2023.07
LABY-Debriefing
국군의무학교에서 사용하는 임상수행능력 향상을 위한 의료평가 및 관리 솔루션
- 역할
- 백엔드 개발, 인코더 제어 모듈 개발, 시스템 통합 테스트 및 배포
- 기술
- Node.js, FFmpeg, RTSP, PostgreSQL, Apache, PHP, WebSocket
성과실시간 모니터링 및 자동화 시스템 도입으로 교육 관리 효율성 50% 증가
IP 카메라 제어
- FFmpeg으로 IP 카메라의 녹화/일시정지/정지 기능 개발 (RTSP)
- 일시정지 시 생긴 동영상 조각을 병합하여 서비스
백엔드 개발
- RESTful 규칙을 따르는 서버 API 개발
트러블슈팅
문제 · 꺼지지 않는 녹화
네트워크 이상이나 신호 중복 수신 시 녹화 서버가 종료 신호를 놓칠 수 있었다.
해결 · 주기적 동기화와 최대 시간
녹화 서버와 디브리핑 서비스의 녹화 상태를 주기적으로 동기화하고, 녹화 최대 시간을 설정해 서버에 무리가 가지 않게 제한했다.
클라우드 기반 LMS 서비스
2022.09 ~ 2023.02
클라우드러닝
학원 인코더 자동 녹화 및 클라우드 기반 LMS 서비스
- 역할
- 백엔드 개발, 동영상 배포 시스템 구축
- 기술
- Apache, PHP, Node.js, PostgreSQL, FTP
성과동영상 배포 시스템의 병렬 처리 구현으로 배포 속도 70% 향상
동영상 병렬 업로드
- 직렬로 처리되던 녹화본 클라우드 업로드를 크기를 정한 Queue로 병렬 처리
- 클라우드 업로드뿐 아니라 동영상 다운로드(FTP)도 병렬 처리
JWT 도입
- 세션 기반 로그인을 JWT로 리팩터링해 서버 세션 부담 감소
백엔드 개발
- RESTful 규칙을 따르는 서버 API 개발
- 서버 속도 향상을 위해 HTTP/2 도입
트러블슈팅
문제 · 게시글 이미지 업로드
텍스트 에디터가 이미지를 본문에 바이너리로 넣어 조회 쿼리 응답이 느려졌다.
해결 · 파일 변환 및 주소 매핑
본문의 이미지 바이너리를 파일로 저장하고 그 자리에는 파일 경로를 넣었다.
문제 · 쌓이는 진도율
플레이어가 주기적으로 남기는 진도율 데이터가 너무 많아져 진도율 조회가 느려졌다.
해결 · 주기적 진도율 병합
3개월이 지난 동영상은 실시간 진도율을 처리하지 않고 스케줄러가 진도율만 따로 모아 저장하도록 바꿨다.
서비스 바로가기 ↗
실시간 사내 방송 솔루션
2022.03 ~ 2022.09
LABY-CAST
인코더를 통한 실시간 사내 방송 시스템 솔루션
- 역할
- 실시간 스트리밍 기능 구현, 솔루션 유지보수
- 기술
- Wowza Streaming Engine, IIS, ASP, MSSQL, .NET
성과사내 방송 시스템 안정성 향상으로 시청률 40% 증가, 시스템 다운타임 15% 감소
방송 시작 신호 제어
- 사업장별 Wowza 스트림 전송은 허용해 두고 최상위 메인 서버에 신호를 주어 방송 제어
테이블 백업
- 외부 업체가 동기화하는 사용자·부서 테이블을 백업하고 관리
트러블슈팅
문제 · 많은 사용자 추가
방송 시 사용자 추가에서 만 건 정도의 I/O가 발생해 느렸다.
해결 · 벌크 인서트
MSSQL 최대 개수인 2,000개씩 끊어 벌크 인서트해 쿼리 속도를 높였다.
문제 · 중복된 사용자
외부 업체 데이터가 중복으로 들어오는 경우가 있었다.
해결 · Set을 활용한 중복 제거
프론트(JavaScript)에서 Set으로 1차 제거하고, 백엔드(C#)에서도 중복을 확인해 예외 처리했다.