嵌入式系统原理及应用课件：嵌入式项目实践.pptx

嵌入式系统原理与应用嵌入式项目实践---语音识别多媒体系统设计

嵌入式项目实践CONTENTS01.系统功能要求02.部分硬件设计电路03.系统程序设计04.结果显示

01PARTONE系统功能要求

近年来，人工智能领域迎来显著突破，尤其是生成式人工智能（GenAI）的迅速崛起，广泛应用于业务职能中，并受到企业高管的高度关注。同时，OpenAI开发的ChatGPT成为全球焦点，其能力的大幅提升标志着AI技术的重要飞跃。此外，AI在医疗、教育、交通等多个领域产生深远影响，开源AI的发展和许可辩论也成为热议话题，特别是近年来人工智能产业蓬勃发展，正在成为新一轮技术产业变革的重要力量。大到智能机器人，小到掌上设备，各式各样的人工智能产品不断亮相，与人的互动方式也在不断创新。项目前景

该项目需要使用到的技术主要包括Linux操作系统相关知识，人工智能相关知识，网络通信相关知识，文件IO相关知识，语音识别API的使用。通过该项目，学生将会对人工智能、语音识别的原理有较为基础的了解。需要完成的具体功能包含以下四个方面，电子相册、音乐播放器、视频播放器、语音识别控制。项目介绍

采用GEC6818物联网综合实验箱，实现语音识别的多媒体系统设计，以s5p6818为核心，通过触摸实现图片的切换、音乐播放、视频播放机语音识别控制以及结合物联网云。本课题设计需要完成的基础功能包含以下几个方面。1、电子相册，采用触摸方式实现图片的切换；2、音乐播放器，采用触摸方式实现音乐的切换；3、视频播放器，采用触摸方式实现视频的切换；4、语音识别控制，能够实现录音、识别。5、实现客户端与服务器功能，将语音识别功能放在服务端，根据识别结果控制开发板。系统功能需求

扩展功能：1、上传语音识别服务端到阿里云服务器，实现外网访问服务器解析语音信号并控制开发板。2、驱动应用，实现上位机监测与控制AMR端设备。系统功能需求

02PARTTWO部分硬件设计电路

显示模块使用液晶显示器（LCD）是以液晶为基本材料的显示组件。其通过控制液晶分子两端的电压来控制液晶分子的转动方向，继而控制每个像索点偏振光投射度而达到显示的目的。目前常称的LCM(LCDModule)即为LCD模组，其包含了LCD、控制驱动芯片、PCB板、背光源、结构件以及连接器等诸多部件装配在一起的组件。显示模块电路如图9.2所示。1.显示模块

录音模块使用板载麦克风，同时支持3.5mm耳机接人，其电路如图9.3所示。该音模块通过引脚和1GEC6818进行连接。在检测到屏幕被点击之后进行录音。2.录音模块

音频播放需要使用外接耳机，接人核心板上的3.5mm输出接口(绿色)，其电路如图9.4所示。当系统接收到aplay命令后，则播放选择的音频。3.播放模块

03PARTTHREE系统程序设计

首先从服务器端开始，进行离线语音识别初始化和socket初始化。然后判断是否连接成功，如果是的话，则接收文件并进行语音识别，最后发送结果。如果不是，则需要重新尝试连接或处理其他错误情况。客户端也进行了类似的操作，包括触摸屏初始化、socket初始化以及接收触屏指令等步骤。整个系统通过这种方式实现了语音命令到设备动作的转换。1.主程序设计

1）、BMP图片介绍2.图片显示BMP：它采用位映射存储格式，除了图像深度可选以外，不采用其他任何压缩，因此，BMP文件所占用的空间很大。BMP文件的图像深度可选lbit、4bit、8bit及24bit。BMP文件存储数据时，图像的扫描方式是按从左到右、从下到上的顺序。BMP文件组成：BMP文件由文件头、位图信息头、颜色信息和图形数据四部分组成。BMP文件头（14字节）：BMP文件头数据结构含有BMP文件的类型、文件大小和位图起始位置等信息。位图信息头（40字节）：BMP位图信息头数据用于说明位图的尺寸等信息。2）、BMP图片在Linux中，-切皆文件，LCD显示屏对应的设备文件为/dev/fb0。如果想让LCD显示屏显示颜色，就是把颜色写人到LCD显示屏对应的设备文件中，查看LCD设备文件相关信息。

3）、代码示例2.图片显示

1）、触摸屏应用接口3.触摸屏使用连接操作系统的输入设备，可不止一种，也许是一个标准PS/2键盘，也许是一个USB鼠标，或者是一块触摸屏，甚至是一个游戏机摇杆，Linux在处理这些纷繁各异的输入设备的时候，采用的办法还是找中间层来屏蔽各种细节，请看下图：

2）、触摸屏原理分析3.触摸屏使用1，输入设备驱动层每一种设备都有其特定的驱动程序，他们被妥当地装载到操作系统的设备模型框架内，封装硬件所提供的功能，向上提供规定的接口。2，核心层此处将收集由设备驱动层发