第十八届“挑战杯”全国大学生课外学术科技作品竞赛
2023
省赛
课外学术科技作品竞赛(主体赛)
三等奖
未转化
否
1、作品设计、发明基本思路针对市面上认知障碍儿童的辅助训练系统大多存在模态单一等问题,我们利用人工智能和深度学习算法,融合语音、姿态、脑电等多种模态,通过丰富的虚拟现实场景为患儿提供沉浸式训练。 2、系统创新性 (1)融合多模态人机交互手段,提供沉浸式训练训练过程模拟现实场景,吸引力强,沉浸度高。(2)面向实际生活场景,提供丰富的故事线系统结合实际场景,内置两大故事线,训练内容符合患儿特点。(3)脑电模块实时监测,及时反馈惠儿训练状态脑电模块便捷舒适,实时检测,判断患儿专注度与放松度。 3、关键技术 (1)模糊语音指令识别 采用端点检测技术检测有效声音序列,通过语音识别算法得到识别结果。(2)特定姿态准确识别 通过关键点筛选器筛选出图像帧中主要人物的关键点,使用姿态分类器识别出特定姿态。 (3)脑电专注度识别 采用单导千电极提升舒适度,实时检测患儿训练的专注度和放松度。
暂无
暂未公开
暂未公开
暂未公开