《深度学习原理及应用》课件 第12章预训练模型.pptx

《深度学习原理及应用》课件 第12章预训练模型.pptx

  1. 1、本文档内容版权归属内容提供方,所产生的收益全部归内容提供方所有。如果您对本文有版权争议,可选择认领,认领后既往收益都归您。。
  2. 2、本文档由用户上传,本站不保证质量和数量令人满意,可能有诸多瑕疵,付费之前,请仔细先通过免费阅读内容等途径辨别内容交易风险。如存在严重挂羊头卖狗肉之情形,可联系本站下载客服投诉处理。
  3. 3、文档侵权举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多

第12章预训练模型在图像处理领域,预训练模型的应用已成为一项成熟的策略,例如VGG-16,它展示了通过冻结网络的特定参数并在少量数据上进行微调,就能取得显著的效果。当训练数据有限且不足以支持复杂网络的训练时,利用预训练模型不仅能够加速训练进程,同时由于这些模型提供了良好训练的底层参数,也为模型的进一步优化提供了一个良好的起点。底层网络提取出的特征虽然与具体的任务无关,但却具有跨任务的普遍适用性。这正是使用预训练参数初始化新任务网络参数的关键原因。相较之下,网络的高层参数更为任务相关,可以使用Fine-Tuning微调手段,利用新数据集对这些特征进行调整,从而达到更好的效果。

预训练技术的影响

文档评论(0)

lai + 关注
实名认证
内容提供者

精品资料

版权声明书
用户编号:7040145050000060

1亿VIP精品文档

相关文档