⏳Rule Engine → LLM 분리 — Phase 5 (룰 엔진만 구현, 문구는 고정 템플릿)
08 · 2026.06.21 — 진행중PROJECT IMAGE project8.png
PROJECT 08
InSight Tracker
카메라 기반 손 제스처 인식과 아이트래킹으로 PC에서 스마트폰을 원격 제어하는 AI 포트폴리오 프로젝트
⚙ PM · AI 모델 · 기획
MediaPipePythonOpenCVFlask/WebSocketADB
현재 진행상황
✓Level 1 완료: 화면 미러링 + ADB 마우스 원격제어
✓제스처 매핑 확정 (기본 모드 + 전화 모드), MediaPipe Hands
21-landmark 좌표 추출 기반 인식
✓퍼유저 캘리브레이션 (샘플 평균 → calibration.json 저장)
✓내장 제스처 모델 파일 부재 시 graceful degradation 구현
(커스텀 규칙 기반 제스처는 정상 동작)
⏳Level 2 실기기 최종 검증 (터치·샤카 제스처 정확도 개선 후 재측정)
⏳Level 3: MediaPipe FaceMesh 기반 아이트래킹 설계 및 구현
03 LAB / IDEAS
어떤 생각을 하고 있는가
아직 실무 경험은 없지만, 사용자·도메인을 직접 겪어본 사람으로서 그릴 수 있는 서비스
제안서와 아키텍처 스케치를
모았습니다.
SERVICE PROPOSALIDEA
MissionRing
미션을 완료해야만 꺼지는 AI 알람 · 경도 치매 케어를 위한 라이프로그 플랫폼
사진 촬영 미션을 수행해야만 알람이 꺼지는 구조로 루틴 실행을 강제화. VLM이 촬영 상황과 시간 진위(EXIF + 실시간 크로스체크)를
검증하며, 통화 기록 요약·일과 사진을 기반으로 하루 리포트를 자동 생성. 경도 인지장애 사용자에게는 오늘과 일주일 전 일과를 반복 회상시키는 인지 훈련 모드를
제공, 보호자 계정과 연동해 이상 징후를 알림.
한국 설화 모티프의 BLE 태그 기반 스마트 분실물 추적 앱 — "잃어버린 물건은 도깨비가 숨긴 것"
ESP32 기반 BLE 태그로 GPS 없이 신호 세기만으로 분실물 위치를 추정합니다. 차키=바퀴도깨비, 지갑=금전도깨비처럼
분실물 카테고리별 캐릭터를 전 기능에 매핑한 스토리텔링 UX가 핵심. "마지막 목격 장소", "사탕으로 유인" 등 분실 알림 흐름을 설화 내러티브로
전환해 설계했습니다.
ARCHITECTURE SKETCH
Firmware: ESP32 DevKitC + BLE 신호 세기 기반 위치 추정
Mobile: Android (BLE 스캔 · 캐릭터 UX)
Backend: FastAPI (예정)
Tooling: PlatformIO (검토중)
ESP32 DevKitCBLEAndroidFastAPI
HEALTHCARE AIIDEA
ADL Motion Analyzer
물리치료사가 설계한 상지 재활 동작 편차 시각화 도구
AI-Hub 데이터셋 71601(손·팔 파지-조작 동작, 500만 건)의 정상 손 관절 궤적을 기준으로,
사용자가 웹캠으로 촬영한 일상생활동작(ADL)의 관절 편차를 실시간 시각화합니다.
컵 들어 마시기 동작에서 어깨 굴곡·팔꿈치 굴곡·손목 회외 각도를 추출하고,
정상 범위 대비 편차 점수를 제공합니다. 임상 판단 대체가 아닌 편차 시각화 도구로 설계.
사용자의 직장 위치, 예산, 이동수단, 선호 조건을 입력받아
출퇴근 소요시간, 생활 인프라 접근성, 주거비 부담도를 종합 분석합니다.
공공데이터와 지도 API를 활용해 후보 지역을 평가하고,
개인별 주거 적합도 점수와 장단점을 시각적으로 제공합니다.
단순 매물 검색이 아닌 "살기 좋은 동네"를 찾기 위한 의사결정 지원 도구로 설계.
ARCHITECTURE SKETCH
Input: 직장 위치, 예산, 자차 여부, 선호 조건
Location Analysis: 지도 API 기반 출퇴근 시간 및 이동 편의성 분석
Infrastructure Scoring: 병원·마트·공원·지하철 등 생활 인프라 평가
Cost Analysis: 월세·관리비·예상 생활비 기반 주거비 부담도 산출
AI Ranking: 사용자 선호도 기반 지역 적합도 예측 모델
UI: Streamlit (지도 시각화 + 적합도 대시보드)
PythonStreamlitKakao Map APIPublic DataAI Recommendation System
HEALTHCARE AIIDEA
Drug-Food Interaction Analyzer
약물-식품 상호작용 분석 기반 개인 맞춤 영양 의사결정 지원 시스템
복용 약물, 연령, 성별, 기저질환 정보를 기반으로 약물-식품 및 약물-영양소
상호작용을 분석하여 잠재적 위험 요인을 탐지합니다. AI 기반 추천 엔진을 통해
주의 식품, 권장 식품, 부족 가능 영양소를 제시하며, 사용자의 건강 상태에 맞는
영양 섭취 가이드를 제공합니다. 의료적 진단이 아닌 예방 중심의 건강관리 지원
플랫폼으로 설계합니다.