直播视频主观质量优化.pdf

直播视频主观质量优化 姚 冬 主题 • 视频颜色校准 • 视频帧率优化 • 音视频同步 颜色是问题吗 ？ 颜色是问题吗 ？ 视频直播处理流程 RGB 前处理 YUV RGB-YUV 视频编码 剪裁、缩放、 264 、265 GPU美颜 Internet YUV RGB YUV-RGB 视频解码 视频渲染 几个基本概念 • RGB • YUV 和 YCbCr • Color Matrix • Color Range • BT.601 BT.709 RGB和YCbCr 注：借用了wikipedia的示意图，实际上手机上还是CMOS，不过颜 色原理差不多啦 颜色取值范围 • Video Range （Limited Range） • RGB ［16，235］ • Y ［16，235］CbCr ［16，240］ • Full Range • ［0…255］ 颜色转换标准 • BT.601 • SDTV，1982年，数字电视标准 • BT.709 • HDTV，1990年，高清数字电视标准 • BT.2020 • UHDTV，2012年，超高清标准 颜色转换公式 （VideoRange ） • BT.601 • Y = 0.299R + 0.587G + 0.114B • Cb =-0.172R – 0.339G + 0.511B + 128 • Cr = 0.511R – 0.428G – 0.083B + 128 • BT.709 • Y = 0.213R + 0.715G + 0.072B • Cb =-0.117R – 0.394G + 0.511B + 128 • Cr = 0.511R – 0.464G – 0.047B + 128 颜色处理的问题 • 既然颜色转换有多种方法，那么怎么确定 得到的颜色是遵循哪套标准的？ • 在多个端传递视频数据的时候，颜色转换 方式怎么传递？ • 到底该用哪套标准？ • 怎么测试颜色是否正确？ 颜色处理的问题 • iOS下采集的Sample Buffer里会包含color matrix属性 • H.264标准里，SPS头包含VUI信息，指定 color space和color range • 根据我们的测试结论，BT.601 VideoRange 在多个平台普遍支持比较好 颜色测试用例 颜色问题小结 • 颜色标准的选择会影响主观画质 • 不同平台对颜色标准的支持不一样 • BT.601标准兼容性更好，但是BT.709 及后续标准更先进 帧率和流畅性 • 帧率的选择