CN107371029-CN201710503913-基于内容的视频包优先级分配方法.pdfVIP

(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 107371029 A (43)申请公布日 2017.11.21 (21)申请号 201710503913.9 (22)申请日 2017.06.28 (71)申请人 上海大学 地址 200444 上海市宝山区上大路99号 (72)发明人 王永芳　朱芸　朱康华　 (74)专利代理机构 上海上大专利事务所(普通 合伙) 31205 代理人 顾勇华 (51)Int.Cl. H04N 19/167(2014.01) H04N 19/17(2014.01) H04N 19/37(2014.01) H04N 21/234(2011.01) H04L 29/06(2006.01) 权利要求书3页 说明书10页 附图4页 (54)发明名称 基于内容的视频包优先级分配方法 (57)摘要 本发明公开了一种基于内容的视频包优先 级分配方法，首先，根据NAL类型得到初始的 slice优先级顺序，参数集优先级最高，I帧、P帧 的优先级次高。然后用显著性加权的结构相似性 来表示空域感知重要性，用运动活动性表示时域 感知重要性，并联合得到空时域感知优先级。将 优先级信息写入到NAL 头文件中避免了产生额 外的码流开销。信道解析NAL头文件，获取NAL类 型和时空域感知优先级指标，从而确定每个视频 包的优先级顺序。在丢包网络环境中，从低优先 级开始丢弃，对高优先级的视频包予以保护。在 解码端采用拷贝前一帧的简单方法进行错误隐 A 藏得到解码视频。本发明方法在相同丢包率的情 9 况下，视频质量比随机丢包方法得到的视频质量 2 0 1 高，提高了视频传输的鲁棒性。 7 3 7 0 1 N C CN 107371029 A 权　利　要　求　书 1/3 页 1.一种基于内容的视频包优先级分配方法，其特征在于该方法的具体步骤为： a.对码流包优先级进行初级分配； b.空域感知重要性提取：每帧图像初级分配完，计算每一个slice的显著性和对应的 SSIM，将显著性作为SSIM的加权因子用于表示空域感知质量，其值越大表示空域感知重要 性越高； c.对步骤b所得的空域感知质量的值进行二值化处理，将视频图像分为显著区域，设为 “1”和非显著区域，设为“0”；对于每个slice，将二值化结果进行归一化处理，若非零，则该 slice判定为空域感知显著，否则为非感知显著； d.时域感知重要性提取：计算slice中所有最大编码单元(Largest Coding Units, LCU)的编码单元(Coding Units,CU)运动矢量的幅值作为运动活动性，若运动活动性大于 0，判定当前slice时域显著，否则为时域不显著； e.时空域感知优先级分配：当slice中的区域既是空域感知重要性区域也是时域感知 重要性区域时，它的空时域感知优先级等级最高；当slice中的区域是空域感知重要性区域 或时域感知重要性区域时，优先级次高；而当slice中的区域既不是空域感知重要性区域也 不是时域感知重要性区域时，分配最低感知优先级，即表示为： f.感知重要性写入：将步骤e得到的感知重要性指标写入NAL头文件预留位中，通过解 析该重要性指标，判断其优先级顺序；丢包环境下，从优先级最低的视频包开始丢弃，直到 达到丢包率为止。 2.根据权利要求1所述的基于内容的视频包优先级分配方法，其特征在于所述的步骤a 的具体步骤为：当有连续5个包丢失时，设定下一个包的优先级为高，优先级索直接写入NAL 头文件中；然后