深度学习的迁移模型.PDFVIP

深度学习的迁移模型 杨强 香港科技大学， 新明工程学讲座教授 计算机与工程系主任, 大数据研究所主任 AlphaGo 还不会做什么 ？举一反三 19x19 21X21 深度学习的迁移模型 迁移学习 迁移学习 Transfer Learning 下一个热点 ：迁移学习 Transfer Learning 迁移学习 Transfer Learning 迁移学习的优点 1 小数据 迁移学习的优点 2 可靠性 Domain1 Domain4 Model Domain2 Domain3 迁移学习的优点 3 个性化 迁移学习的难点 迁移学习本质 找出不变量 One Knowledge, Two Domains Driving in Mainland China Driving in Hong Kong, China 迁移学习 Transfer Learning • Yann LeCun: 机器学习的热力 学模型? • （百度百科）热力学主要是从能量 转化的观点来研究物质的热性质 ， 它提示了能量从一种形式转换为另 一种形式时遵从的宏观规律，总结 了物质的宏观现象而得到的热学理 论。 深度学习 ＋迁移学习 多层次的特征学习 深度学习的迁移模型 定量分析 input output domain shared weights distance loss input outpu t • Bengio, Yoshua, Aaron Courville, and Pascal Vincent. Representation learning: A review and new perspectives. IEEE transactions on pattern analysis and machine intelligence 35.8 (2013): 1798-1828. 深度学习模型的迁移 ： 定量分析 • TCA : Transfer Component Analysis: Pan, Sinno Jialin, Ivor W. Tsang, James 准确率 T. Kwok, and Qiang Yang. Domain adaptation via transfer component analysis. IEEE Transactions on Neural Networks 22, no. 2 (2011):