机器视觉应用技术20人脸关键点.docxVIP

实验20人脸关键点

一、实验目的

1、掌握OpenCV人脸关键点识别的方法。

2、掌握AiCam框架的部署和使用。

二、实验内容

1.算法原理

1.1基本描述

人脸关键点检测对于面部情感和面部识别至关重要。我们的脸有几个可以识别的特征，比如眼睛、嘴巴、鼻子等等。当我们使用DLib算法检测这些特征时，我们实际上得到了每个特征点的映射，利用dlib库可以实现人脸关键点的检测和标注。

1.2算法逻辑

人脸关键点检测是依据dlibpython库进行实现，利用dlib库可以准确定位到人脸的位置同时构建人脸关键点检测对象。使用cv.rectangle将位置信息的识别框标注到图像上，以此实现人脸的检测。再根据人脸检测对象构建人脸68关键点矩阵。其中最核心的是调用dlib库获取人脸位置信息、返回人脸位置信息和构建人脸68关键点矩阵。详细的算法流程如下：

2.功能设计

2.1功能描述

AiCam人工智能轻量化应用框架是一款面向于人工智能边缘应用的开发框架，采用统一模型调用、统一硬件接口、统一算法封装和统一应用模板的设计模式，实现了嵌入式边缘计算环境下进行快速的应用开发和项目实施。

AiCam为模型算法的调用提供RESTful调用接口，实时返回分析的视频结果和数据，同时通过物联网云平台的应用接口，实现与硬件的连接和互动，最终形成各色智联网产业应用。

三、实验步骤

1.工程部署

1.1硬件部署

1）准备人工智能边缘应用平台，给边缘计算网关正确连接Wi-Fi天线、摄像头、电源。

2）按下电源开关上电启动边缘计算网关，将启动ubuntu操作系统。

3）系统启动后，连接局域网内的Wi-Fi网络，记录边缘计算网关的IP地址，比如：192.168.100.200。

1.2工程部署

1）运行MobaXterm工具，通过SSH登录到边缘计算网关（参考附录2）。

2）在SSH终端创建实验工作目录：

$mkdir-p~/aicam-exp

3）通过SSH将本实验工程代码和aicam工程包（DISK-AILab\02-软件资料\02-综合应用\aicam.zip）

上传到~/aicam-exp目录下（文件的上传参考附录2）。

4）在SSH终端输入以下命令解压缩实验工程：

2.工程运行

1）在SSH终端输入以下命令运行实验工程：

3.人脸关键点

1）点击应用左侧的菜单选择“人脸关键点”，出现实时视频识别画面，在摄像头视窗内出现人脸时，将检测人脸并标注关键点信息