시각 장애인에게 시력을 제공하는 새로운 VR의 시대
NuEyes와 HTC VIVE가 협력하여 시력을 더욱 쉽게 제공합니다.
건강 | 디자인/시각화 | 훈련/시뮬레이션
5분 분량
시각 장애인들에게 스마트 글래스는 일상 생활을 개선하는 혁신적인 도구입니다. 이 최첨단 기기는 시각 장애와 독립성 사이의 간극을 좁히며, 이전에는 불가능했던 경험의 세계를 열어줍니다.
저시력은 안경, 콘택트 렌즈, 의료 치료로 완전히 교정할 수 없는 시력 장애를 의미합니다. 망막 변성, 녹내장, 당뇨성 망막병증, 망막색소변성 등의 다양한 안구 질환으로 인해 발생합니다. 저시력은 일상에서 작업할 때나, 독서, 얼굴 인식, 이동 등 세상을 살아가는 데에 영향을 미칩니다.
도전
NuEyes Technologies Inc. 는 미국 해군 출신의 Mark Greget이 설립했습니다. NuEyes를 설립하기 전, Greget은 보조 기술 분야에서 시각 장애인을 위한 돋보기 장치를 배포했습니다. 그러나 이 장치들은 CRT TV나 마이크로필름 기계 크기만큼 커서 다루기 힘들었습니다. 더 잘 보고 싶은 것을 돋보기 아래에 놓고 큰 화면에서 확대된 모습을 보는 방법인데, 그러나 그것 앞에 앉아 있어야 했고, 집 안에서 돌아다닐 수 없고, 집 밖으로 가지고 나가기는 더더욱 힘들었습니다.
“이동이 불가능하며 크고 무거워서 TV를 보거나 사랑하는 사람의 얼굴을 보는 것이 불편했습니다. 그저 우편물을 읽거나 사진을 보는 등의 기본적인 작업에만 사용할 수 있었습니다.”
수천 명의 고객을 집에서 방문한 후 Greget은 그들이 착용이 가능한 장치를 원한다는 것을 깨달았습니다. 식당에 가서 메뉴를 읽거나 쇼파에 앉아서 TV를 볼 수 있는 것을 원했습니다. 그래서 “무거운” 기계들에 대해 불평한 같은 고객들에게 프로토타입을 테스트하며 연구한 후 Greget은 NuEyes를 설립했습니다.
NuEyes는 하드웨어 제조사들의 장치와 결합할 수 있는 혁신적인 소프트웨어 솔루션을 만들기 시작했습니다. 이 솔루션은 저시력자들이 문제 없이 볼 수 있도록 능력을 부여했습니다. 초기의 착용 가능한 장치들은 저시력자들에게 이동성을 제공했지만, 시야는 매우 좁았습니다. 그 때 NuEyes는 AR 장치와 HTC VIVE로 방향을 바꿨습니다.
해결
NuEyes는 시력이 제한된 사람들을 위한 착용 가능 솔루션인 e3+ 를 만들기 위해 HTC VIVE와 파트너십을 맺었습니다. HTC VIVE XR Elite 를 기반으로 한 e3+는 실제 세계의 XR 공간을 렌더링하여 시력이 제한된 사람들이 자신이 보고 있는 것에 따라 시야를 맞춤 설정할 수 있는 기능을 제공합니다.
“우리의 HTC VIVE와의 파트너십은 새로운 방식으로 저시력 소비자들에게 능력을 부여하는 것입니다. HTC VIVE XR Elite 모듈식 시스템, 사용하기 쉬운 광학 렌즈, 그리고 넓은 시야각을 활용하여 사람들이 낮은 시력을 갖고도 세상을 더 쉽게 볼 수 있도록 도와줍니다.” 라고 Greget은 말합니다.
VIVE XR Elite에서 실행되는 NuEyes의 고급 시각 AI 소프트웨어는 전방 카메라를 사용하여 착용자 앞의 실제 세계의 가상화된 이미지를 만듭니다. 이를 통해 착용자는 확대, 대비 필터 적용, 다양한 언어의 음성 변환 기능을 사용할 수 있습니다.
지난 1년 동안 NuEyes는 다양한 제품들을 테스트하고 제조사들과 접근성과 그 영향에 대해 이야기했습니다. “HTC VIVE 팀을 만나고 그들을 알아가고 HTC VIVE XR Elite를 테스트하는 시간을 보낸 후 우리는 신뢰할 수 있는 파트너를 가졌고, 우리의 소프트웨어가 필요한 수백만 명의 삶을 바꿀 수 있는 파트너를 가졌다는 것이 명확했습니다.” 라고 Greget은 말합니다.
XR Elite의 고해상도 패스스루 카메라는 사용자가 장치를 착용하고 주변 세계의 물체들을 더욱 선명하고 확대된 모습으로 볼 수 있게 해줍니다. 저시력자가 e3+를 착용하면 책을 읽기 위해 그냥 집어 들거나, 스포츠 이벤트에서 가족 구성원들을 관람하거나, 영수증을 읽고 부엌에서 적절한 냄비나 팬을 쉽게 찾을 수 있어서 독립적인 성격을 되찾을 수 있습니다.
“XR Elite는 카메라, 센서, 그리고 안구 추적 기능을 통해 우리는 훨씬 더 많은 것을 할 수 있습니다.” 라고 Greget은 말합니다.
e3+는 XR Elite의 전방 카메라로부터 원시 영상(raw feed)을 가져와서 소프트웨어에서 분석하여 사용자가 자신이 보고 있는 것을 확대하고 개선할 수 있게 해줍니다. 이 모든 것은 순식간에 일어나지만, 원시 영상에 접근할 수 없다면 불가능할 것입니다.
“HTC VIVE와 파트너십을 맺는 것에 훨씬 더 열려 있었습니다. 그러나 또한 하드웨어의 품질(카메라, 화면, 기능 측면에서)이 다른 것들을 훨씬 능가했습니다.”
그러나 e3+는 어떠한 데이터도 캡처하지 않습니다. 그것이 하는 모든 것은 소프트웨어에서 실시간으로 일어나며, 연결이 필요하지 않습니다. 아무것도 캡처되지 않습니다. 아무것도 클라우드로 가지 않습니다.
“NuEyes에서는 우리가 사용자의 데이터를 저장하지 않는다는 것을 중요하게 생각합니다.” Greget은 말합니다. “우리는 그보다 소비자들과 그들의 시력에 능력을 부여하는 쉽게 사용할 수 있는 장치를 제공하는 것의 중요성에 집중합니다.”
Greget은 HTC VIVE가 개인 정보 보호 문제를 고려해 주었다는 의지가 XR Elite의 품질과 함께 NuEyes가 그들과 파트너십을 맺기로 결정한 주요한 이유 중 하나였다고 말합니다.
“HTC의 사용 사례 및 고객을 이해하고 도우려는 의지가 느껴졌습니다.” Greget은 말합니다. “이는 단지 하드웨어를 판매하는 것이 아닌 차이를 만드는 것입니다. 우리는 미국 기반의 재향 군인 소유의 회사로서 정말로 함께 일할 수 있는 파트너를 찾고 있습니다. 단지 헤드셋을 팔려고 하는 사람들과는 달리요.”
결과
NuEyes 고객들의 피드백은 아래와 같았습니다.
TV에서 자신의 좋아하는 팀을 보고 싶어하는 고객이 있었습니다. 그들은 더 크고 큰 TV를 계속 사고 그 옆에 바로 앉아서 보아야 했습니다. e3+를 사용하면 이제 화면을 확대하고 편안하게 앉을 수 있습니다.
휴대폰 수리 업무를 하는 고객이 있었습니다. 이전에는 큰 돋보기를 사용하고 휴대폰을 얼굴 가까이 들고 있어야 했습니다. e3+는 그들의 작업 방식을 바꿔주었습니다. 납땜기를 다루는 것을 좋아하는 고객이 있었는데 시력을 잃은 이후로 할 수 없었던 일을 다시 할 수 있게 되었습니다. 패션 업계에서 이직을 원하는 고객은 이제 충분히 잘 볼 수 있어서 더 좋은 직장을 구할 수 있게 되었습니다.
고객을 위한 NuEyes 의 개발은 계속됩니다.
“우리가 해결한 것은 저시력자를 위한 보조 기술의 휴대성과 다양성입니다.” Greget은 말합니다. 그는 시력을 잃은 이후로 누군가와 함께 여행해야 하고 그들의 눈이 되어주고 세상을 탐험할 수 있도록 도와줘야 하는 사람들을 가리킵니다. NuEyes는 이러한 도움에 의존하지 않아도 되는 자유를 줍니다.
“더 좋은 직장을 구하든, 자신의 아이들이 축구하는 것을 보든, 혹은 자신의 좋아하는 팀을 TV에서 보든지 상관없습니다.” Greget은 말합니다. “사람들에게 더 독립적인 삶을 제공하는 것이 저희의 목표입니다.”
VIVE에게 문의하기😎
HTC VIVE 팀의 구성원과 당신의 가상 현실 프로젝트에 대해 의논하고 싶으신가요?
문의하기 ›