【教学PPT】第18课 手势滑动控制.pptxVIP

手势滑动控制

手势控制能从科幻想象蜕变为生活中的实用利器吗?

仅凭手势就与大型显示屏互动怎么实现呢?我们一起来体验手势控制吧！

手势滑动控制手势识别的基本原理手势识别的应用手势识别项目实践

手势识别的基本原理Round1

01利用AI摄像头的内置动态手势识别功能，实现对向上、向下、向左、向右手势的精准识别。

01基本原理摄像头采集图像（持续捕捉画面，获取图像信息）（定位手部的“骨骼结构”，输出21个关键点）（指尖方向计算：计算手腕到中指根部的向量方向）（判断手势类别）提取手掌关键点计算方向向量动态手势确认输出手势类别（输出手势类别）手掌检测（检测手掌，输出检测框）

01摄像头采集图像持续捕捉画面，获取图像信息

01手掌检测检测手掌，输出检测框”

01提取手掌关键点定位手部的“骨骼结构”，输出21个关键点

01计算方向向量指尖方向计算：计算手腕到中指根部的向量方向

01动态手势确认判断手势类别向上向下向左向右

01输出手势类别输出手势类别向上

手势识别的应用Round2

02应用场景智能平板：手势向上滑动屏幕自动翻页。

02应用场景体感游戏：通过摄像头识别手势来切水果。

1.思考，说一说，你会通过手势识别实现什么样的应用?思考02手势识别的应用

项目实践Round3

根据识别到的手势结果，控制角色的“眼睛”分别看向对应的方向，以此实现手势控制机器“视线”的效果。03项目原理

03项目原理

硬件连接编写程序体验手势识别控制项目实践03手势滑动控制

03硬件准备手势滑动控制的实验设备清单主控板*1AI摄像头4.0*14PIN连接线*1数据线*1

按要求准备好硬件，先自己思考一下该如何连接硬件？实践03硬件准备

03硬件连接P0、P1

03硬件连接

按步骤连接硬件，自检接口、排查故障，记录实践发现与思考。实践03硬件连接

03编写程序1.添加指令：【扩展】—【添加】—【AI】—【加载】AI摄像头4.0。

03编写程序2.设置AI摄像头4.0引脚，TX：用于发送数据。RX：用于接收数据。

03编写程序设置屏幕颜色执行动态手势识别输出结果初始化

03编写程序执行动态手势识别输出结果

03编写程序否则如果条件判断

03编写程序循环识别状态流转结果显示初始化

编写手势滑动控制程序，并体验结果。实践03编写程序

03刷入程序将程序刷入乐动掌控2.0中。等待AI摄像头4.0初始化完成的提示信息出现即可开始识别。

03体验手势识别控制

1.当你做出“向上”“向下”“向左”“向右”的手势时，屏幕上的“眼睛”图片会如何变化？思考2.这种变化与手势识别的哪个步骤直接相关？03手势滑动控制

知识收纳掌握了手势识别原理与流程。了解了手势识别的多元应用场景。验证了四种手势的实时识别效果。