登录 | 注册

基于多模态交互技术的疏浚设备培训系统研发与应用

148

成果主要完成人

杨 志、石启正、杨 顺、张启亮、李 晟、闻长生、胡 刚、陶瑞强

项目概况

本项目所属科学技术领域——疏浚吹填工程中疏浚设备培训技术。采用虚拟现实、手势识别、语音控制、VR 等 交互技术,开展了耙吸船虚拟现实培训系统研究,建立了一套基于多模态交互技术的疏浚设备培训系统。1、构建了典型万 方耙吸船全船内外结构及关键机具等三维模型,首次研制了单机版耙吸船全船漫游学习系统,实现了可视化便携式培训。2、 创建了基于多模态交互技术的耙吸船疏浚作业流程培训系统,开发了基于数据驱动的耙臂姿态仿真功能,实现了耙吸船实 时动态耙臂姿态三维可视化,达到了浸沉式、交互式培训效果。3、开发了基于 VR 技术的疏浚设备拆装系统,实现了疏浚 关键设备认知、拆卸和安装模拟的指导功能。