Kinect-原理及开发心得课件

Kinect原理及开发心得Kinect原理及开发心得工作流程kinect传感器手势声音位置主机kinectsdk应用程序颜色数据流深度数据流声音数据流2工作流程kinect传感器手势声音位置主机kinectsd安装环境硬件需求：2.66-GHz

DirectX®9.0c

2GBofRAM

软件需求：开发软件：MicrosoftVisualStudio®2012ExpressorotherVisualStudio2012edition开发环境：Microsoft.NETFramework4.5

KinectforWindowsSDK的下载地址：/en-us/kinectforwindows//fwlink/?LinkID=323589操作系统：Windows7(x86orx64)3安装环境3安装步骤1.硬件安装下面的图片是Kinect和ACAdapter/PowerSupply：4安装步骤1.硬件安装4软件安装步骤2.KinectSDK安装KinectSDK的安装过程非常简单，无需任何设置，直接安装即可。5软件安装步骤2.KinectSDK安装5安装步骤3.环境测试KinectSDK安装完成后，我们将Kinect转接口的USB接口插入到PC中。PC会发现新硬件，并且自动查找驱动程序安装。下图是安装完成后的示意图：6安装步骤3.环境测试6安装步骤4.测试程序我们打开KinectSDK中自带的SampleSkeletalViewer就可以很方便地检测Kinect设备是否与PC已经连接好了。7安装步骤4.测试程序7图像数据流+景深数据流=？

景深图8图像数据流+景深数据流=？景深图8NUI骨骼跟踪kinect根据像素的变化识别出20个人体关键点根据20个关键点生成人体骨骼系统在生成20个骨骼关键点后，kinect有一个跟踪模块自动跟踪20个点的坐标位置骨骼跟踪系统：同时识别6个人，只有2个人能进行动作追踪9NUI骨骼跟踪kinect根据像素的变化识别出20个人体关图像数据流+景深数据流=骨骼数据流10图像数据流+景深数据流=骨骼数据流10helloworld获取骨骼流从骨骼流中获取20个关键点动作处理11helloworld获取骨骼流从骨骼流中获取动作处理11获取骨骼流人体骨骼数据流2个tracked状态人体，包括20个点的精准捕捉初始化骨骼数据流//Linq语法，查找离Kinect最近的、被跟踪的骨骼SkeletonclosestSkeleton=(fromsinallSkeletonswheres.TrackingState==SkeletonTrackingState.Tracked&&s.Joints[JointType.Head].TrackingState==JointTrackingState.Trackedselects).OrderBy(s=>s.Joints[JointType.Head].Position.Z).FirstOrDefault();returnclosestSkeleton;

12获取骨骼流人体骨骼数据流1220个关键点动作处理SkeletonPointhead=s.Joints[JointType.Head].Position;头部坐标SkeletonPointleftshoulder=s.Joints[JointType.ShoulderLeft].Position;左肩坐标SkeletonPointleftHand=s.Joints[JointType.HandLeft].Position;左手坐标//左手举起boolisLeftHandRaised=(leftHand.Y-leftshoulder.Y)>0.2;//左手伸出boolisLeftHandStretched=(leftshoulder.X-leftHand.X)>0.4;1320个关键点动作处理13感谢您的关注感谢您的关注Kinect原理及开发心得Kinect原理及开发心得工作流程kinect传感器手势声音位置主机kinectsdk应用程序颜色数据流深度数据流声音数据流16工作流程kinect传感器手势声音位置主机kinectsd安装环境硬件需求：2.66-GHz

DirectX®9.0c

2GBofRAM

软件需求：开发软件：MicrosoftVisualStudio®2012ExpressorotherVisualStudio2012edition开发环境：Microsoft.NETFramework4.5

KinectforWindowsSDK的下载地址：/en-us/kinectforwindows//fwlink/?LinkID=323589操作系统：Windows7(x86orx64)17安装环境3安装步骤1.硬件安装下面的图片是Kinect和ACAdapter/PowerSupply：18安装步骤1.硬件安装4软件安装步骤2.KinectSDK安装KinectSDK的安装过程非常简单，无需任何设置，直接安装即可。19软件安装步骤2.KinectSDK安装5安装步骤3.环境测试KinectSDK安装完成后，我们将Kinect转接口的USB接口插入到PC中。PC会发现新硬件，并且自动查找驱动程序安装。下图是安装完成后的示意图：20安装步骤3.环境测试6安装步骤4.测试程序我们打开KinectSDK中自带的SampleSkeletalViewer就可以很方便地检测Kinect设备是否与PC已经连接好了。21安装步骤4.测试程序7图像数据流+景深数据流=？

景深图22图像数据流+景深数据流=？景深图8NUI骨骼跟踪kinect根据像素的变化识别出20个人体关键点根据20个关键点生成人体骨骼系统在生成20个骨骼关键点后，kinect有一个跟踪模块自动跟踪20个点的坐标位置骨骼跟踪系统：同时识别6个人，只有2个人能进行动作追踪23NUI骨骼跟踪kinect根据像素的变化识别出20个人体关图像数据流+景深数据流=骨骼数据流24图像数据流+景深数据流=骨骼数据流10helloworld获取骨骼流从骨骼流中获取20个关键点动作处理25helloworld获取骨骼流从骨骼流中获取动作处理11获取骨骼流人体骨骼数据流2个tracked状态人体，包括20个点的精准捕捉初始化骨骼数据流//Linq语法，查找离Kinect最近的、被跟踪的骨骼SkeletonclosestSkeleton=(fromsinallSkeletonswheres.TrackingState==SkeletonTrackingState.Tracked&&s.Joints[JointType.Head].TrackingState==JointTrackingState.Trackedselects).OrderBy(s=>s.Joints[JointType.Head].Position.Z).FirstOrDefault();returnclosestSkeleton;

26获取骨骼流人体骨骼数据流1220个关键点动作处理SkeletonPointhead=s.Joints[JointType.Head].Position;头部坐标SkeletonPointleftshoulder=s.Joints[JointType.ShoulderLeft].Position;左肩坐标SkeletonPointleftHand=s.Joints[Jo