机器学习与数据挖掘清华大学.pptVIP

Machine Learning and Data Mining 2009 中国科学院自动化研究所 中国科学院自动化研究所 Machine Learning and Data Mining 2009 机器学习的困惑与历史的启示 王珏 第九届机器学习 及其应用研讨会 2011年11月，清华大学 自 然 模 型 [采样] 样本集 模型 [算法] [交叉验证] 假设iid 统计机器学习的麻烦 ？？？？？ [设计实验] 问题：模型是自然模型吗？ 统计机器学习 如果数据不充分，在大变量集合下，如何设计实验，获得新数据。 统计机器学习的困难：实验设计存在组合问题。iid成为与自然模型无关的假设！ 特殊函数的逼近 社会的需求 生物、网络、金融、经济和安全等众多领域，大变量集合的海量数据不断涌出，社会迫切需要分析与处理这些数据的有效理论、方法与技术。 寻找分析与处理大变量集合海量数据的新理念、理论、方法与技术成为当前迫切的任务。 历史的故事 线性感知机 基于最小二乘的Rosenblatt的感知机(1956)，其本质是多变量空间上的平均(回归)。 1902年，James的神经元相互连接 1943年，McCulloch和Pitts的神经元工作方式 19