나의 역할

객체탐지 연동·추적 및 접근성 UX 개발

YOLOX TFLite 모델 연동 및 Letterbox·bbox 처리 개선
자이로·Optical Flow 기반 객체 추적 및 Target Lock 개선
STT/TTS·비프·진동·터치 확인 기반 접근성 UX 개선
후보 감지 → Target Lock → 접근 안내 → 상품 재확인 상태 흐름 구현·개선
Room 기반 검색 기록·재검색 기능 구현 및 실기기 QA

서비스 기획은 기획 담당자, 주요 모델 및 기술 스택 선정은 팀장이 담당했습니다. 저는 Android 앱에서 객체탐지·추적 기능을 연동하고, 이를 상품 탐색 흐름과 접근성 UX로 연결했습니다.

※ 개발 과정에서 AI 코딩 도구를 활용했으며, 요구사항 적용·기능 통합·실기기 테스트·오류 재현 및 수정 검증을 반복했습니다.

문제 해결 및 개선

1. 원거리 상품 미탐지 개선 - 단계적 타일링

문제 앱을 테스트하면서 원거리 상품이 화면에 작게 잡힐 경우 탐지되지 않는 문제를 발견했습니다. 전체 프레임을 모델 입력 크기로 축소하면서 작은 상품의 특징이 줄어드는 것이 원인일 수 있다고 판단했습니다.

개선 기본 전체 화면 탐지에 실패하면 2×2, 이후 3×3으로 화면을 나누어 다시 탐지하는 단계적 타일링 방식을 구현했습니다. 타일에서 탐지된 bbox는 원본 화면 좌표로 복원하고, 중복된 탐지 결과는 병합하도록 처리했습니다. 이후 타일 경계에 걸린 상품을 고려해 영역 간 overlap도 추가했습니다.

결과 전체 화면 탐지만 반복하던 방식에서, 원거리·소형 상품을 분할된 화면에서 다시 탐지할 수 있는 흐름으로 개선했습니다.