成果针对多模态人机交互面临的有效信息采不准、用户意图辨不清、交互方式不自然问题,创新性地提出了边端协同高实时多模态数据融合感知与安全存储、多粒度意图理解、多元人机交互系列方法,满足了人机安全可靠、便携自然的交互需求。相关技术在教育教学场景中创新应用,为学生、教师和管理人员提供高效自然的智慧教学管一体化服务,提升了学习体验、教学质量和管理效能。成果完成人依托西安电子科技大学与北京世纪超星信息技术发展有限责任公司达成战略合作协议,将技术成果应用于超星教管学一体化智慧教育教学平台,构建了以常态化教学平台为中心、智能管理为手段、科学评价为特色的一体化、数字化、智能化教管学的整体解决方案。平台助力西安电子科技大学实现教育教学的智能化和高效化,并在全国多个省(市、自治区)落地,有力地推进了教育数字化进程,产生了显著的经济效益和社会效益。