processing与leapmotion技术说明简述

processing与leapmotion技术说明简述

Leap Motion相关技术

Leap Motion利用红外led红外光能透过红外滤镜照射到障碍物上，光就会被反射回来被摄像头所接收，而可见光又不能透过红外滤镜这一特点，将两颗 120 帧率的摄像头得到的半灰度的红外图像通过双目视觉的算法把图像的景深提取的出来进行3d建模。整个过程用opencv实现，每帧能控制在 5ms 以下。在获取景深后很容易就可以得到物体的3D轮廓，对3D轮廓进些计算从而得到各个角点的空间位置，然后封装输出这些角点位置的API 提供给开发者。 在PC下安装processing编译软件，LeapMotionForProcessing、opengl、nyar4psg、OBJLoader、GSVideo等第三方库。Leap Motion获取手的信息，检测到手掌中心的位置、手掌的法向量、手掌朝向的方向等信息，利用Processing将Leap Motion追踪hands, fingers, and tools取得的数据进行处理，首先通过hand.isLeft()与hand.isRight()判断是左手还是右手，再通过Hand hand : leap.getHands获取手掌三维坐标X、Y、Z方向的位置信息（hand.getPosition），手掌稳定（hand.getStabilizedPosition）系数，手指的运动速度（finger.getVelocity）信息，手指行动的方向（finger.getDirection）矢量信息，以及手抓（hand.getGrabStrength）的动作信息等，把processing获取的不同手势的相关信息进行严格的手势编译，用于放大倍数

processing与leapmotion技术说明简述

(scale)、沿XYZ轴的旋转（rotateX、rotateY、rotateZ）、切换（anim[h].draw）等变换，从而使虚拟物体缩放、旋转、切换等变换。