计算机视觉技术在物流行业的应用.pptx

计算机视觉技术在顺丰物流中的应用计算机视觉技术在顺丰物流中的应用数字化场院智能化设备业务自动化室内定位导航三维信息测量文字检测识别目标检测识别违禁品识别机器视觉异常行为分析无人机交通信息采集智能运单识别X光违禁品检测智能运单识别数据类型多包含30+字段人员成本高完成数据录入 需要上百人的团队数据量大运单量20万+/天精度要求高电话、地址、费用等信息要求准确 率100%智能运单识别全面单识别包含字段（30+）：收、寄件电话收、寄件地址收、寄单位名称费用月结帐号托寄物勾选项增值服务备注运单录入系统终端运单拍照智能运单 识别系统运单系统 集群人工审单平台运单存储智能运单识别智能运单识别框架图地址纠偏补全文本检测定位文本识别图像预处理图像质量过滤版面分析柔性形变校正基于地址库的文本 处理汉字、数字、字母手写体、打印体文本区域检测智能运单识别图像预处理12 柔性形变校正3 版面分析图像质量过滤拍照模糊、光照不均 等质量问题检测将图像最大化还原为模 板对内容和位置关系进行解析智能运单识别模糊图像过滤智能运单识别柔性形变矫正不适用于严重形变智能运单识别版面分析——对版面内的图像、文本、表格的信息和位置关系进行自动 分析、识别和理解1 内容混杂区域1区域5区域6区域2区域32 颠倒顺序区域7区域4区域83 窜行排版智能运单识别文本检测识别1 文本检测提取文本特征，区分文本与非文 本区域，精确定位文本行2 文本识别训练文本分类器，识别图片中的 数字、字母、汉字等内容智能运单识别文本检测一般文本检测 常见问题有：过大过小等定位不精确 多框少框等漏检误检文本倾斜、排版密集等导致分割不准EAST文本检测器Multi-channel FCN结构 可检测长文本、带角度文本EAST智能运单识别文本检测优化思路运单文本特点：1.表单背景文字需要抑制，不被检出2.文本长短不一，过短或过长的文本定位困难1 改变负样本选择策略 2 改变卷积核，增大感受野智能运单识别文本识别文本识别模型：CNN+BLSTM+CTC框架文本识别智能运单识别文本识别运单文本的难点类内变化多打印、手写多种字体混合识别难度大汉字多字组合结构，不同类别 容易混淆、手写潦草、篡改、 错别字、排版形式多变数据不足中文数据集较少、 6000 多常见字、类别覆盖不 全、分布不均衡智能运单识别地址纠偏补全建立地址OCR文本与地址库文本间的翻译模型（ Seq2Seq ）广东省深州市广东省深圳市??纠正OCR的识别错误对人为填写的地址错误、不标准或者不完整等情况进行纠 偏和补全原始运单文本识别结果地址纠偏补全结果广东深圳罗湖区莲塘聚福路168号金色年华家园栋山深圳市罗湖区莲塘街道聚福路金色年华家园市福田区云家家路星河大厦福民民虹商场3楼古色深圳市福田区沙头街道福民路福民天虹商场深圳西沙周成107国道东方建富物盛工业园十二栋一 楼广汽传视深圳市宝安区西乡街道固戍社区东方建富愉盛工业区公市深圳福田区侨香东路1011号深业浸咖啡（公司付） 深圳市福田区香蜜湖街道侨香路1011漫咖啡智能运单识别性能指标免录率——与人工水平一致的数据占比一致率——收件地址识别结果对应的网点编号正确的数据占比120.00%总量一致率100.00%可信度一致量总量占比累计占比0.98147014730.54%0.54%0.97431534327915.87%16.41%0.96500195032418.45%34.86%0.95279662837110.40%45.27%0.9421089216057.92%53.19%0.9316624173076.35%59.53%0.9212522134014.91%64.45%0.919601106593.91%68.36%0.9756789273.27%71.63%0.89617176662.81%74.44%80.00%60.00%40.00%20.00%0.00%u可信度分布区间 （测试总数272,714）智能运单识别性能指标免录率——与人工水平一致的数据占比一致率——收件地址识别结果对应的网点编号正确的数据占比120.00%总量 一致率100.00%可信度一致量总量占比累计占比0.98147014730.54%0.97431534327915.87%0.96500195032418.45%0.95279662837110.40%0.9421089216057.92%0.9316624173076.35%0.9212522134014.91%0.919601106593.91%0.9756789273.27%0.89617176662.81%0.54%16.41%34.86%45.27%53.19%59.53%64.45%68.36%71.63%74.44%80.00%60.00%40