HTC VIVE × 诺亦腾,助力认知功能障碍康复
Hi5 2.0 VR交互手套,用科技开启数字未来
使用者案例 | 企业合作 | 设计 | 训练与模拟 | 医疗与康复
5 minutes read
北京诺亦腾科技有限公司(以下简称“诺亦腾”)创立于2012年,是具有国际竞争力的智能感知与沉浸式交互技术创新者,服务客户遍及全球五十余个国家。主营业务涵盖
数字媒体技术、数字骨科医疗器械、以及智能医体融合应用
三大板块,其技术与产品在影视与游戏开发制作、文化与泛娱乐体验、医疗手术辅助及康复、运动测评与训练、工业仿真与虚拟教学等领域、亦有广泛应用,持续赋能行业创新与变革。
与年龄相关的认知功能衰退是一个连续、递进的过程,
涵盖了轻度认知功能障碍(mild cognitive impairment,MCI)和痴呆。伴随这一过程,老年人的生活质量会逐步下降,主要体现在日常生活能力逐渐失能。MCI是介于痴呆和正常老化的中间状态,其发展为痴呆的概率是正常人群的10倍,每年将近10~15%的MCI转化为痴呆。延缓MCI进展是痴呆防控的重要举措之一。目前一致性的观点均强调认知障碍的研究重心应从痴呆前移到MCI,以期通过提早干预,取得更好的疗效。
近年来,北京医院老年医学科联合诺亦腾,致力于认知功能障碍老年人精细运动能力评估与干预系统、产品的研发及临床推广应用工作,在老年医学领域更是首次提出
“老年人手-脑协同精细运动能力”
的新概念。
诺亦腾新一代的虚拟现实交互手套Hi5 2.0,以
HTC VIVE Focus 3 VR
一体机
为平台,结合HTC最新发布的
腕带式追踪器
,基于惯性姿态数据与光学定位数据的融合算法,实现虚拟空间中双手的六自由度自然动作捕捉和交互模拟。
该技术平台完全基于移动端,集捕捉、定位、传输、计算、渲染、显示于一体,具有极高的集成度,让用户摆脱以往繁琐的外置设备,只需简单地佩戴VR头戴式设备和手套,实现开机即用的消费级可穿戴应用体验。
整套系统体积小、便于携带,精度高、易操作、成本低、适合在医院、社区卫生服务中心等环境下完成评估工作。
大量研究显示精细运动能力的衰退与认知障碍发生相关。
精细运动能力指个体凭借手以及手指等部位的小肌肉或小肌群的运动,在感知觉、注意力等心理活动的配合下完成特定任务的执行能力。执行能力是反映认知功能的维度之一,精细运动能力往往通过手部任务的执行结果来进行判断。诺亦腾参与该项目旨在
借助虚拟现实、手部精细运动交互等技术方式,帮助医生、患者家属多方提早识别病人的认知衰退状态,预防并延缓病人运动能力的下降进程
,从而减轻可能由此引发的家庭和社会照护的工作量。
通过大量文献汇总及数据挖掘,该课题团队设计了
“明尼苏达测试”、“普渡钉板测试”、“双手协同九宫板”、“记忆孔位”、“双手绘画”5项考察老年人“手-脑”协同精细运动能力的虚拟测评工具
,利用VR技术绘制相关场景,开发交互式功能,实现不同测评任务中手部动作捕捉与软件反馈的实时联动。同时完成后台数据计算系统的开发,实现基础运动参数(角速度、位移等)的转化,使其成为可供临床参考的潜在运动评价指标,最终形成
适合认知障碍老年人精细运动的交互式评估系统
,为针对老年MCI人群的“手-脑”协同能力评估与训练的数字疗法和产品奠定了重要基础,可进一步研发出最终的虚拟现实环境下“手-脑”协同精细运动能力多维度交互式评估与干预系统,实现数字疗法产品转化与临床应用。
图 ① 为明尼苏达测试VR交互式情景;图 ② 为普渡钉板测试VR交互式情景;
图 ③ 为记忆孔位测试VR交互式情景;图 ④ 为双手协同九宫板测试VR交互式情景;
图 ⑤ 为明尼苏达翻转测试实际演示情景;图 ⑥ 为明尼苏达置换测试实际演示情景。
自诺亦腾第一代VR交互手套发布以来,该系列产品已被广泛应用于游戏开发、展览展示、教育培训、工业仿真等诸多领域之中,获得开发者以及终端用户的青睐。
新一代Hi5 2.0是诺亦腾于2022年全新推出的VR交互手套,通过全手12枚超小型惯性传感器,实现精准的手部动作VR交互,为认知功能障碍人群开发了一款便携易用的虚拟现实认知功能筛查与训练应用。
内置划时代的超小型无线惯性传感器。姿态计算帧率由初代的180fps提升至500fps,精准捕捉手指姿态。数据传输帧率高达120 fps,实现毫秒级时延,为体验者带来前所未有的沉浸感。
凭借世界领先的3D运动测量与动作捕捉技术,诺亦腾构建了从开发平台到垂直应用的一揽子解决方案能力,为各行各业提供全栈式解决方案。正如诺亦腾企业名称的美好愿景, “Noitom” 源于英文 “Motion”(运动)一词的倒序拼写,寓意诺亦腾以数字化人体运动为起点,不断在新领域中开拓探索,致力于用科技开启数字未来。相信未来诺亦腾会持续探索,带给我们更多惊喜。