VIORA: 시각장애인·노년층을 위한 스마트글래스
시각장애인과 시력·반사신경이 떨어진 노년층을 위한 웨어러블 스마트글래스입니다. 흰지팡이로 확인하기 어려운 상체 높이의 장애물을 감지해 위험을 알려 줍니다. 부가 기능으로 카메라·오디오 기반 AI 질의응답, 그리고 낙상을 감지하면 주변에 알리고 보호자에게 메시지를 보내는 기능이 있습니다.
2026.07 – 2026.09 · 슬로그업 · React Native 앱·처리 구성 비교 테스트 단독 담당, 낙상 감지 로직 공동 개발·테스트, 기능별 처리 위치 및 하드웨어 보완안 제안
- React Native
- MentraOS
- Mentra Bluetooth SDK
- OpenAI
프로젝트 개요
시각장애인과 시력·반사신경이 떨어진 노년층을 위한 웨어러블 스마트글래스입니다. 흰지팡이로 확인하기 어려운 상체 높이의 장애물을 감지해 위험을 알려 줍니다. 부가 기능으로 카메라·오디오 기반 AI 질의응답, 그리고 낙상을 감지하면 주변에 알리고 보호자에게 메시지를 보내는 기능이 있습니다.
슬로그업의 사내 자체 프로젝트이고, 저는 PoC 단계에서 앱 개발과 펌웨어 일부를 맡았습니다. 2026년 9월까지 PoC 개발에 참여했습니다.
| 항목 | 내용 |
|---|---|
| 팀 구성 | 개발 2명 (본인: 앱·펌웨어 일부, 다른 개발자: 펌웨어) |
| 나의 역할 | React Native 앱·처리 구성 비교 테스트 단독 담당, 낙상 감지 로직 공동 개발·테스트, 기능별 처리 위치 및 하드웨어 보완안 제안 |
주요 성과
- STT·LLM·TTS를 온디바이스, BLE, Wi-Fi, 스마트폰 중 어디서 처리할지 비교하는 테스트를 혼자 설계하고 측정했습니다. 하드웨어 자원과 응답 속도를 보고 위험물 감지는 온디바이스에서, 음성 LLM 질의응답은 Wi-Fi로 연결한 스마트폰에서 처리하자고 제안했고, 다른 개발자와 함께 결정했습니다.
- Mentra Bluetooth SDK로 디바이스 연결 설정을 구현하고, STT·TTS·LLM 질의응답과 한국어·일본어·영어 설정을 넣었습니다. 지원 언어는 한국·일본 기업과의 협업과 CES 출품이라는 프로젝트 초기 목표에 맞춰 정했습니다.
- 시각장애인 사용자를 위해 앱의 화면 전환 안내를 구현하고 음성 안내 문구를 썼습니다.
- 머리에 착용하는 디바이스를 다룬 논문을 참고해 다른 개발자와 함께 우리 시나리오에 맞는 낙상 감지 로직을 MentraOS 펌웨어에 적용하고 테스트했습니다.
- 단안 카메라로는 가까운 물체를 판단하기 어렵다는 점을 들어 ToF 센서 도입을, HFP 같은 통화 기능이 지원되지 않는다는 점을 들어 BLE 칩 분리를 제안했습니다. 두 가지 모두 후속 하드웨어 논의에서 낸 의견입니다.