深度学习交互的投影游戏系统

单位名称:华南理工大学 联系人:谢先生 联系方式:020-81309552 邮箱:1079017915@qq.com 地址:广东广州
所属地域
广东省
专业领域
人工智能   
专利状态
已申请专利
成果权属
本人
项目阶段
研制阶段
合作方式
合作方拟投入资金
≤100万元

详细介绍

项目简介:实现一个可以在任意平面进行实时接触式交互的投影系统,该系统基于图像和深度学习的方法进行定位,具有更好的鲁棒性,且检测速度能达到实时性要求。采用YOLOV3 网络算法,在各种背景下采集共400 张图像进行训练。在GTX 1050 配置下每帧处理时间约100ms。主要解决的问题:

投影交互系统的实时接触检测问题。以往的检测算法往往在精度和实时性上难以同时达到要求,本项目运用深度学习目标检测算法检测接触位置,即使在复杂的投影背景下都有良好的检测精度。完全基于视觉进行检测,不需要依赖更多的外设。经典的投影交互技术中,红外光定位是最常用的算法,这个方法在一定情况下有很高的精度和实时性。但对红外光源的依赖是导致这种技术无法进一步推广的原因。本项目实现在任意投影平面的交互。

本项目知识产权情况:项目团队共获取发明专利4 项,实用

新型专利21 项。

主要相关专利:

《一种基于图像处理技术的虚拟触摸屏系统》

《一种基于模式识别的树蕨投影交互系统》

《一种基于双目视觉的摄像投影交互系统》

《一种基于STM32 单片机的双目测距系统及其测距方法》