NBE|哈佛大学团队Mobilio智能手机应用:融合AI与个性化音频的室外辅助导航系统
哈佛大学工程与应用科学学院研究团队研发出Mobilio智能手机导航应用,一款面向中重度视觉障碍人群、融合轻量化AI与个性化音频的室外辅助导航系统,有效破解视障者室外路径规划、即时避障两大核心难题。该系统无需专用昂贵设备,依托iPhone消费级传感器与算力,搭配胸挂手机、开放式骨传导耳机即可使用,可兼容传统白手杖,普惠性极强。
系统搭载多模态感知技术,通过手机LiDAR与视觉惯性里程计构建实时3D栅格地图,精准识别1.5米内障碍物;依托轻量化语义分割模型,实时解析人行道、斑马线等路况,同时融合传感数据校准GPS漂移,实现亚米级精准定位。创新引入“人在回路”优化机制,通过CMA-ES算法动态适配用户音频感知差异,自定义音频速率、音调等参数,规避认知过载或信息遗漏问题。
真实复杂场景临床测试显示,该系统可将用户导航旁人纠正次数下降72%,室内碰撞次数减少41%,大幅提升出行安全性。其可用性评分达79分,用户接受度优异。该成果开创“通用硬件+软件定义”的无障碍辅助新模式,相较传统导盲设备、普通导航软件优势显著,为残障辅助数字疗法提供全新范式,目前仍存在续航有限、极端天气适配弱等待优化问题。

