中央民族大学本科生研究训练计划立项.doc

中央民族大学本科生研究训练计划立项 申请书 基于立体视觉的 自动跟随智能购物车的设计与实现 Design and Implementation of Intelligent Shopping Cart with Automatic Tracking based on Stereo Vision Technique 团队成员：覃姝缘 陈彦晓 张隆基 学 院：信息工程学院 专 业：电子信息工程 中央民族大学本科生研究训练计划立项申请书 基于立体视觉的自动跟随智能购物车的设计与实现 目 录 一、立项依据 3 1 项目研究背景及意义 3 2 国内外现状 4 2.1.视觉平台 4 2.2.运动目标检测与跟踪 4 2.3.双目视觉 5 3学术价值及应用价值 6 4 团队及成员优势 6 二、研究目标、内容、关键问题和主要特色 7 1 研究目标 7 2 研究内容 7 2.1.功能组成 7 2.2.工作原理 8 3主要特色及创新点 16 4有待解决的问题 16 4.1.建立一体化双目视觉平台的系统体系结构 16 4.2.双目协调机制研究 17 三、预期效果与具体成果 17 1自动跟随 17 2罗列清单 17 3测重 17 4识别打折信息 17 5记账 18 四、具体安排及进度 18 五、经费预算 19 参考文献 20 附件 22 一、立项依据 1 项目研究背景及意义 随着人民生活水平不断提高，为满足广大消费者购物需求，各种连锁超市应运而生，超市购物越来越受到广大消费者青睐。但在购物过程中，特别是在规模大、品种多的大型综合超市中，手推式购物车使顾客感到疲惫，另外，顾客时常找不到所需购买物品的位置、无法及时了解超市商品打折信息，这些浪费了顾客的宝贵时间，扰乱了他们的购物心情，从而一定程度上超市营业额。另外，收银台结帐时的排队问题，特别是周六、日或者节假日，收银台处的长龙着实让顾客望而却步。那么，有无一种设备能够减少结账时的冗繁环节，同时能为顾客提供打折信息和自动导航呢？ 本小组成员在进行了多方面调研（见附件），并与导师深入交流之后，发现将仿生人眼的双目视觉系统应用在超市智能购物车中能够一定程度上有效地解决上述问题。在小组成员共同努力和导师的帮助下，通过认真思考，对基于双目视觉系统的自动跟随智能购物车进行了可行性分析，该车除了能够实现自动跟随购物者外，还能自动识别打折信息，并通过语音和显示屏告知购物者，购物者可查看购物清单和物品金额、同时能够测量所购物品的重量，人性化地提醒购物者注意物品轻重。其简单的结构和低廉成本将会受到购物者和超市的青睐。 双目立体视觉 (Binocular Stereo Vision)是机器视觉的一种重要形式，它是基于视差原理并利用成像设备从不同的位置获取被测物体的两幅图像，通过计算图像对应点间的位置偏差，来获取物体三维几何信息。融合两只眼睛获得的图像并观察它们之间的差别，使我们可以获得明显的深度感，建立特征间的对应关系，将同一空间物理点在不同图像中的映像点对应起来，这个差别，我们称作视差(Disparity)图像，如图 图1视差图像Fig 1.Disparity Image 双目立体视觉的开创性工作始于上世纪的60年代中期。美国MIT的Roberts通过从数字图像中提取立方体、楔形体和棱柱体等简单规则多面体的三维结构，并对物体的形状和空间关系进行描述，把过去的简单二维图像分析推广到了复杂的三维场景，标志着立体视觉技术的诞生。随着研究的深入，研究的范围从边缘、角点等特征的提取，线条、平面、曲面等几何要素的分析，直到对图像明暗、纹理、运动和成像几何等进行分析，并建立起各种数据结构和推理规则。特别是上世纪80年代初，Marr首次将图像处理、心理物理学、神经生理学和临床精神病学的研究成果从信息处理的角度进行概括，创立了视觉计算理论框架 [1] 1997 年美国国防部高级研究项目署(DARPA)设立了以卡内基梅隆大学为首，麻省理工学院等高校参与的视觉监控项目 VSAM(Visual surveillance and monitoring)[2],该系统能够用于普通民用场景以及战场的实时监控，卡内基梅隆大学在该系统建成之后，建立了一个校园监控系统。PASSWORDS(Parallel and advanced surveillance system with operator assistance for revealing dangerous situations) [3]系统是一个智能视频图像分析系统,用于实现视频监视以满足不同用户的安全要求。Pfinder(Person finder)