基于语义部位分割的条纹斑竹鲨鱼体运动姿态解析.pdfVIP

第 37 卷 第 3 期 农 业 工 程 学 报 Vol.37 No.3 2021 年 2 月 Transactions of the Chinese Society of Agricultural Engineering Feb. 2021 179 基于语义部位分割的条纹斑竹鲨鱼体运动姿态解析 刘 斌，王凯歌，李晓蒙，胡春海 （燕山大学河北省测试测量技术重点实验室，秦皇岛 066004 ） 摘 要：条纹斑竹鲨具有较高的经济价值和医用研究价值。人工驯养对环境和温度等因素要求较高，时常出现大规模病 死现象。利用视频图像量化分析鱼体运动行为，有助于进行异常识别和早期预警，将有效提高养殖养护水平。该研究针 对人工驯养的条纹斑竹鲨鱼，提出一种基于深度神经网络的语义部位分割方法，并将分割结果应用于剖析条斑鲨鱼体运 动姿态。首先，依据条斑鲨形态特征将其划分为 7 个可视的身体组成构件（头部、右胸鳍、左胸鳍、右腹鳍、左腹鳍、 躯干、尾巴）；再对全景养殖监控视频中抽取的 476 幅条斑鲨子图进行各部位的像素级标记，通过数据增强到 1 944 幅建 立鱼体语义部位数据集，其中训练集为 1 166 幅图像，测试集为 778 幅图像；然后，在语义分割网络模型基础上进行深 度学习训练，使用深度学习框架对网络参数进行微调使得网络训练结果达到最优。最后，利用语义部位分割结果定位躯 干和鱼头质心建立随体坐标，通过随体坐标的方向变化判明鱼体动作姿态。基于 FCN-8s 和 Segnet 两种深度网络模型进 行了鱼体部位分割的对比试验，测试结果表明基于 Segnet 网络的分割方法在头部、右胸鳍、左胸鳍、右腹鳍、左腹鳍、 躯干、尾巴部位的准确度分别高出 FCN-8s 深度网络 1.50，4.70 ，6.95 ，6.56 ，6.01 ，0.85 ，0.84 个百分点。语义部位分割 结果能够有效判别条斑鲨鱼体目标的动作姿态，可为鱼体异常行为识别和进一步开展面向条斑鲨的动物行为学试验提供 技术参考。 关键词：机器视觉；神经网络；条纹斑竹鲨；语义部位分割；深度学习 doi ：10.11975/j.issn.1002-6819.2021.03.022 中图分类号：TP391.41 文献标志码：A 文章编号：1002-6819(2021)-03-0179-09 刘斌，王凯歌，李晓蒙，等. 基于语义部位分割的条纹斑竹鲨鱼体运动姿态解析[J]. 农业工程学报，2021，37(3)：179-187. doi ：10.11975/j.issn.1002-6819.2021.03.022 Liu Bin, Wang Kaige, Li Xiaomeng, et al. Motion posture parsing of Chiloscyllium plagiosum fish body based on semantic part segmentation[J]. Transactions of the Chinese Society of Agricultural Engineering (Transactions of the CSAE), 2021, 37(3): 179- 187. (in Chinese with English abstract) doi：10.11975/j.issn.1002-6819.2021.03.022