S2C：技术路线和解决方案.docx

PAGE

PAGE14

分布式图片处理系统

S2C技术路线与实现方案

参赛题目

分布式图片处理系统

项目经理

lj

客户关系经理

lhm

做成日期

2014-5-10

技术经理

rb

文档题目

S2C技术路线与实现方案

合作成员

csyyjq

S2C技术路线与实现方案

S2C.1项目技术简介

S2C.1.1开发平台

Windows7：主要实现图片的处理功能

Windows7是由微软公司（Microsoft）开发的操作系统，核心版本号为WindowsNT6.1。Windows7可供家庭及商业工作环境、笔记本电脑、平板电脑、多媒体中心等使用。

Ubuntu12.10：主要实现分布式任务的分发功能

Ubuntu是一个以桌面应用为主的Linux操作系统，其目标在于为一般用户提供一个最新的、同时又相当稳定的，主要由自由软件构建而成的操作系统。

S2C.1.2开发语言

我们软件的应用程序由C++语言编写，主要使用OpenCV开源算法库。C++是在C语言的基础上开发的一种集面向对象编程、泛型编程和过程化编程于一体的编程语言。C++语言的主要特点表现在两个方面，一是尽量兼容C,二是支持面向对象的方法。它操持了C的简洁、高效的接近汇编语言等特点，对C的类型系统进行了改革的扩充，因此C++比C更安全，C++的编译系统能检查出更多的类型错误。

S2C.1.3开发环境

Windows764bit

MicrosoftVisualStudio2008SP1

OPENCV-2.4.9

Ubuntu12.10

Gearman1.1.12

S2C..1.4适用平台

该分布式的图片处理系统适用于在装有MicrosoftVisualStudio2008SP1的Windows7平台上运行客户端程序。在Linux系统下架构服务器JobServer。

S2C.2系统结构简介

本分布式图片处理系统主要分为3大模块，即图片处理模块、Gearman任务分发模块以及系统监控模块。

图片处理模块

该模块主要是利用OpenCV算法，对图片进行各种加工处理，以实现图片的分布式处理。我们主要对图片进行以下处理：图像阵列直方图处理、智能人脸识别处理、前景背景区域分割处理、颜色分布直方图抽取处理以及阈值分割物体处理等。

此外，该模块具有良好的扩展性，可以以插件化的形式方便地添加不同的图片处理算法，以及对该算法参数的配置，实现了物体分割时阈值和像素灰度值的设定。

Gearman任务分发模块

Gearman是一个用Perl写的任务调度程序，提供了一种通用的程序框架来将任务分发到不同的机器或者不同的进程当中，支持简单的优先级和同步与异步任务，配置一下可以实现队列信息持久化，它提供了进行并行工作的能力、负载均衡处理的能力，以及在不同程序语言之间沟通的能力。该模块主要通过分布式地调用更适合进行图片处理的机器，让这些机器并发地完成图片的处理，并且可以让这些机器在多个调用期间达到负载均衡，如下图4-1所示。

图4-1Gearman分布式处理

系统监控模块

通过在linux系统环境下打开终端,输入命令指令。

监控JobServer和Work

./check_gearman-Hjobserverhostname-qworker_workerhostname-t10-scheck

check_gearmanOK-localhosthas10workerandisworkingon1jobs|worker=10running=1total_jobs_done=1508

提交主动和被动检查

./send_gearman--server=jobserver--encryption=no--host=”hostname”--service=”service”--messgae=”message”

CPU流量和IO内存监控：

WORKER监控

TOP运行状况

S2C.3开发文件简介

S2C.3.1图像处理主界面与功能类

主界面类

CImageDistributedDlg

图像阵列直方图类

HISTOGRAMCAL

人脸识别类

FACERECOGNITION

前景背景分割类

SEGMENTPICUTRE

颜色直方图抽取类

COLORDISTRIBUTION

阈值分割类

THRESHOLD

S2C.3.2Gearman分布处理

主要组成

Client：负责提交任务。创建需要被执行的job然后发送给JobServer。

Worker：对任务进行相关的处理。向JobServer注册然后从JobServ