幻境科技：产学研联合攻关 提升虚拟现实沉浸式体验

文/潘慧

开栏语

为祝贺杂志理事单位南方电网科学研究院有限责任公司、广东电网有限责任公司、广州幻境科技有限公司、广东工业大学、佛山科学技术学院、仲恺农业工程学院等荣获2019年度广东省科学技术奖，进一步突显其在科技创新与社会进步中的引领地位与标杆示范作用，并鼓舞大家继续埋首创新、砥砺前行，本刊专门开设“科研之星”栏目以连载方式分批报道获奖单位，展示获奖单位的科研风采、创新团队以及重大成果。希望通过这些创新典范的示范，进一步激发全社会创新创造活力，传播创新创业文化，为全省科技创新工作的深入开展及粤港澳大湾区国际科技创新中心的建设提供更有力的支撑。

[导语]

广州幻境科技有限公司（以下简称“幻境科技”或“公司”）成立于2016年，是一家致力于提供自然交互整体解决方案的科技型企业。公司在手势识别、动作捕捉、人工智能（AI）方面深耕不辍，产品已在虚拟现实、智能穿戴、辅助驾驶、文化娱乐、智能医疗等多个行业和领域广泛应用。公司核心团队来自华南理工大学、电子科技大学等知名高校和企业，团队成员在MEMS传感器、机器视觉及人工智能算法等基础研发方面拥有超过15年的经验，在穿戴式动作捕捉、手势识别与交互方面处于全国领先水平。今年3月，幻境科技联合广东工业大学等完成的“高沉浸式虚拟现实交互感知关键技术与应用”项目获得2019年度广东省科技进步奖一等奖。

广州幻境科技有限公司发展历程

《广东科技》：近年来，贵公司在科研创新及技术（产品）研发上的成效如何？

幻境科技：我们公司的技术与产品研发主要遵循自主创新与市场需求为导向相结合的方式开展。公司自成立以来，基于创始团队前期在MEMS传感器动作捕捉应用研发方面的技术积累，针对虚拟现实行业缺少交互手段的迫切需求，开展自然手势交互动作捕捉与识别的技术产品研发，形成了多种技术解决方案和产品。如公司已量产的NullTo-uch、Handy手势交互产品，为虚拟现实交互提供了穿戴式自然手势交互和较原有手柄遥控交互模式更贴近人们使用习惯的双手自然动作交互，使得虚拟现实交互更真实、沉浸体验效果更逼真，产品服务的客户超过200家；公司的“幻米”智能指环是手势交互解决方案的轻量化终端应用产品，以即联即用、即换即用，通过手势动作完成对电脑、智能电视、手机、平板电脑、AR眼镜等智能终端设备的交互操控，公司与小米MIoT平台合作，实现“幻米”指环接入小米MIot智能家居系统，通过手势操控小米智能家居产品，如小米智能音箱、智能空气净化器、智能台灯等；针对白领长时间连续工作导致亚健康的情况，公司研发了一款Spring智能时间管理工具，把高效的工作时间管理与社交娱乐相结合，让广大白领能够更合理地安排工作与休闲时间，提高工作效率。“高沉浸式虚拟现实交互感知关键技术与应用”，这是我们联合广东工业大学、广州卓远虚拟现实科技有限公司等高校和企业完成的。项目主要研究内容包括高精度人体动作捕捉与识别、多模态交互融合、高动态稳定传动平台三大领域技术，合力提升虚拟现实沉浸式体验。

《广东科技》：请介绍一下公司此次获奖的项目。

幻境科技：我们公司获奖项目是

《广东科技》：该获奖项目的最大亮点和创新点是什么？

幻境科技：“高沉浸式虚拟现实交互感知关键技术与应用”项目的最大亮点在于虚拟现实交互感知的高沉浸体验，包括实时高精度自然人机交互与识别、多模态沉浸式交互感知融合的场景体验真实感、高动态多自由度传动的交互反馈实时性，强化用户体验真实感，提高体验舒适性，保障设备可靠性。

广州幻境科技有限公司获得的荣誉

《广东科技》：项目开展过程中遇到的最大难点是什么?是怎样攻克的？

幻境科技：“高沉浸式虚拟现实交互感知关键技术与应用”是一个产学研联合研发项目，项目开展过程中遇到的难点主要有两方面：一方面是跨企业组织的项目组异地协同管理，另一方面是疑难问题技术攻关。异地协同问题主要采取项目总负责人统筹协调、子课题负责制，项目组形成了定期会议沟通进展情况机制，省内项目团队采用定期碰头会与远程视频会议相结合，跨省的项目沟通以远程视频会议为主。研发中的疑难问题，首先在子课题组内部通过已有技术积累及网络资源寻找解决方案，同时充分利用项目组中高校的理论研究优势开展联合技术攻关，各子课题项目组均能及时响应与协助，项目组中的高校团队更是起到了重要作用。本项目的联合协调研发充分体现了团队合作的凝聚力，大家都为同一目标共同奋斗。

《广东科技》：请介绍公司开展联合创新的模式与机制？

幻境科技：本项目的研发实行项目总负责人统筹、子课题负责制。项目总负责人协调管理，把控项目主体技术的总体研究方向，并根据各个参与单位的核心技术优势分为多个子课题，设立子课题负责人，紧紧围绕项目整体研发目标全权开展子课题研发。为保障项目稳定有序推进，进一步加强产学研合作，公司与合作高校建立了校企联合人才培养机制，联合建立长期校企实习基地，高校定期向公司推荐优秀研究生和本科应届毕业生，公司根据项目需求吸收高校合适的应届毕业生到公司实习，培养学生项目开发能力，同时弥补了公司在人员招聘上的不足。

《广东科技》：截至目前，项目产生了怎样的社会和经济效益？

幻境科技：此次获奖项目成果在科学研究、科普教育、工业生产、公共安全、虚拟仿真、医疗康复等多个领域获得了广泛应用，取得了良好的社会和经济效益。一是在科学研究领域，研发产品广泛应用于清华大学、华南理工大学、广东工业大学、中山大学、同济大学等高校科研工作中，为其提供仿真验证平台。二是在工业生产领域，项目产品广泛应用在长虹、格力、中广核等国内知名企业中，为企业提质增效和转型升级助力。三是在科普教育领域，本项目研发的科普、文娱、VR教育产品广泛应用在各地科技馆、博物馆，如广东科学中心、北京青少年科技馆、北京市博物馆、台中自然科技博物馆等公共服务机构，增强了全民科普力度，促进了文化教育及其相关产业发展。四是在虚拟仿真领域，在核电仿真、挥化性有机化合物（VOC）有害气体仿真、医疗手术模拟训练、模拟驾驶等方面建立了应用示范。五是在公共安全领域，助力多地区消防支队、安全生产企业等建立消防安全培训、地震危害仿真应急模拟培训、地下矿井瓦斯爆炸应急逃生仿真模拟应用示范。目前，项目成果向全国科学研究、文化教育、应急安全等领域的上百家单位推广应用。产品远销世界五大洲100多个国家，近3年新增销售额达13.3亿元。

《广东科技》：下一步，公司将在哪些方面继续开展技术研发和攻关？

幻境科技：公司未来将继续在以下两个方面开展技术研发和攻关：一是在现有的核心技术方向持续深耕，也就是基于MEMS技术的动作捕捉与识别技术，向虚拟现实领域、工业生产领域、终端消费产品等领域方向开展研究。二是在人工智能领域开展应用研究，包括光惯融合的空间运动跟踪与识别、AI算法研究、AI智能诊断、VR医疗手术模拟培训等技术研究。