一种由粗至精的rgb-d室内场景语义分割方法-东南大学学报.pdfVIP

第４６卷第４期 东南大学学报（自然科 学版 ） Ｖｏｌ．４６ Ｎｏ．４ 　 ２０１６年７月 ＪＯＵＲＮＡＬＯＦＳＯＵＴＨＥＡＳＴＵＮＩＶＥＲＳＩＴＹ（ＮａｔｕｒａｌＳｃｉｅｎｃｅＥｄｉｔｉｏｎ） 　 Ｊｕｌｙ２０１６ ＤＯＩ：１０．３９６９／ｊ．ｉｓｓｎ．１００１－０５０５．２０１６．０４．００２ 一种由粗至精的ＲＧＢＤ室内场景语义分割方法 １ １ １ １ ２ 刘天亮　 冯希龙　 顾雁秋　 戴修斌　 罗杰波 １ （南京邮电大学江苏省图像处理与图像通信重点实验室，南京２１０００３） ２ （罗彻斯特大学计算机科学系，美国罗彻斯特 １４６２７） 摘要：为了标注室内场景中可见物体，提出一种基于ＲＧＢＤ数据由粗至精的室内场景语义分割 方法．首先，利用分层显著度导引的简单线性迭代聚类过分割和鲁棒多模态区域特征，构建面向 语义类别的超像素区域池，基于随机决策森林分类器判决各个超像素区域的语义类别，实现粗粒 度区域级语义标签推断．然后，为了改善粗粒度级的语义标签，利用几何深度导引和内部反馈机 制改进像素级稠密全连接条件随机场模型，以求精细粒度像素级语义标注．最后，在粗、细粒度语 义标注之间引入全局递归式反馈，渐进式迭代更新室内场景的语义类别标签．２个公开的ＲＧＢ Ｄ室内场景数据集上的实验结果表明，与其他方法相比，所提出的语义分割方法无论在主观还是 客观评估上，均具有较好的效果． 关键词：ＲＧＢＤ室内场景；语义分割；ＳＬＩＣ过分割；稠密ＣＲＦｓ；递归式反馈 中图分类号：ＴＰ３９１　　文献标志码：Ａ　　文章编号：１００１－０５０５（２０１６）０４０６８１０７ ＣｏａｒｓｅｔｏＦｉｎｅｓｅｍａｎｔｉｃｐａｒｓｉｎｇｍｅｔｈｏｄｆｏｒＲＧＢＤｉｎｄｏｏｒｓｃｅｎｅｓ １ １ １ １ ２ ＬｉｕＴｉａｎｌｉａｎｇ　 ＦｅｎｇＸｉｌｏｎｇ　 ＧｕＹａｎｑｉｕ　 ＤａｉＸｉｕｂｉｎ　 ＬｕｏＪｉｅｂｏ １ （ＪｉａｎｇｓｕＰｒｏｖｉｎｃｉａｌＫｅｙＬａｂｏｒａｔｏｒｙｏｆＩｍａｇｅＰｒｏｃｅｓｓｉｎｇａｎｄＩｍａｇｅＣｏｍｍｕｎｉｃａｔｉｏｎ， ＮａｎｊｉｎｇＵｎｉｖｅｒｓｉｔｙｏｆＰｏｓｔｓａｎｄＴｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎｓ，Ｎａｎｊｉｎｇ２１０００３，Ｃｈｉｎａ） ２ （ＤｅｐａｒｔｍｅｎｔｏｆＣｏｍｐｕｔｅｒＳｃｉｅｎｃｅ，ＵｎｉｖｅｒｓｉｔｙｏｆＲｏｃｈｅｓｔｅｒ，Ｒｏｃｈｅｓｔｅｒ１４６２７，ＵＳＡ） Ａｂｓｔｒａｃｔ：ＡｃｏａｒｓｅｔｏｆｉｎｅｓｅｍａｎｔｉｃｓｅｇｍｅｎｔａｔｉｏｎｍｅｔｈｏｄｂａｓｅｄｏｎＲＧＢＤｉｎｆｏｒｍａｔｉｏｎｗａｓｐｒｏ ｐｏｓｅｄｔｏｌａｂｅｌｔｈｅｖｉｓｕａｌｌｙｍｅａｎｉｎｇｆｕｌｃｏｍｐｏｎｅｎｔｓｉｎｉｎｄｏｏｒｓｃｅｎｅｓ．Ｆｉｒｓｔ ，ｔｏｃｏｍｐｌｅｔｅｃｏａｒｓｅ ｇｒａｉｎｅｄｒｅｇｉｏｎｌｅｖｅｌｓｅｍａｎｔｉｃｌａｂｅｌｉｎｆｅｒｅｎｃｅ，ｔｈｅｓｕｐｅｒｐｉｘｅｌｒｅｇｉｏｎｐｏｏｌｓｆｏｒｔｈｅｓｅｍａｎｔｉｃｃａｔｅｇｏｒｉｅｓ ｗｅｒｅｃｏｎｓｔｒｕｃｔｅｄｕｓｉｎｇｈｉｅｒａｒｃｈｉｃａｌｓａｌｉｅｎｃｙｇｕｉｄｅｄｓｉｍｐｌｅｌｉｎｅａｒｉｔｅｒａｔｉｖｅｃｌｕｓｔｅｒｉｎｇ（ＳＬＩＣ）ｓｅｇｍｅｎ ｔａｔｉｏｎａｎｄｒｏｂｕｓｔｍｕｌ