基于AR和手势识别的交互式学习系统

概述

      在传统学习方式中,学生仅通过课本图片和文字来帮助理解结构性的知识点(诸如物理学的安培定律、地理中的行星运动、生物的器官位置和骨骼结构等)。但大多数的二维图像只能展示局部细节,难以直观感受教材阐述的内容,这势必降低学生的学习兴趣。基于Xilinx ZYNQ-7020平台上,我们将增强现实(AR)技术与手势识别相结合。首先,AR技术将声音、动画、交互模块等多种元素整合到APP和PC上,使图书内容变得“活跃”、“鲜活”。然后我们在ZYNQ-7020上搭建了一个移动控制平台,允许用户通过蓝牙或WIFI连接APP或PC。此外,我们还设计了一个附加在控制系统上的摄像头模型来进行手势识别,让用户操作AR模型进行移动、缩放、旋转、组合等操作,使得学习过程更加互动有趣。

 

 

 

系统结构

39

Fig 1. The architecture of our system

 

40

Fig 2. The architecture of the Programmable Logic

41

Fig 3. The architecture of the Processor System

 

 

2019年3月12日 13:02
浏览量:0
点赞
首页    项目    计算机视觉    基于AR和手势识别的交互式学习系统