1.英国剑桥大学 深度强化学习项目通知（2024暑期）.docxVIP

英国剑桥大学

深度强化学习项目

项目综述

深度学习是机器学习领域中一个新的研究方向，其目标是建立模拟人脑进行分析学习的神经网络，并通过这套机制识别与解释文字、图像和声音等数据，从而使人工智能变为可能。本项目是英国剑桥大学设计的，旨在提升学生在深度学习前沿领域的核心知识，掌握主流的工具与技术，并且了解该领域与其它领域之间的关联与发展潜力。

特色与优势

【顶级的剑桥师资】由剑桥大学计算机系教授兼剑桥人工智能小组成员亲自参与设计与授课；

【前沿的课程主题】涵盖当今深度学习与机器学习领域的核心理论，并配合大量实践环节，帮助学生掌握最主流的工具与技术；配以伦敦一日游、传统英式文化体验等丰富的文化活动，全面提升学生的学习体验；

【官方品质项目】学生可获权使用剑桥大学官方教学系统Moodle,入住剑桥大学格顿学院学生宿舍，享受各类学校资源，参与丰富的文化体验活动，并可获得剑桥大学格顿学院的官方成绩单与项目证书；

【四六级即可申请】无需托福雅思成绩，用大学英语四/六级即可申请参加

三、剑桥大学与格顿学院简介

创建于1209年的剑桥大学，是英国乃至世界上历史最悠久的大学之一，同时也被公认为是世界上最顶尖的高等教育机构之一，在艺术与人文、数学、物理、工程与技术、医学、法学、商科等诸多领域拥有崇高的学术地位及广泛的影响力；

2024年QS世界大学综合排名位居第2；2024年Times世界大学综合排名位列第5，计算机科学专业世界排名第4；

格顿学院成立于1869年，距今已有150多年的历史，是剑桥重要的学院之一，在剑桥所有学院中学生总量排名前十，以活跃、轻松和友善的学习氛围著称。格顿学院提供丰富的本科与研究生课程，领域包括工程、计算机科学、建筑、经济学、历史、地理、人文社科、数学、法律、医学、音乐、国际关系、社会学、语言学等。

四、访学项目介绍

【课程日期】

2024年7月22日–8月2日，或8月19日–8月30日

【课程内容】

课程将探讨深度强化学习的最新潜力，侧重于强化学习和深度学习的基础知识（包括卷积神经网络、图形神经网络、生成神经网络和Transformer模型），并将分享机器人和游戏中的实例，从而加强学生对深度学习核心理念的了解，提升相关的研究技能与实用技巧。

项目包含20小时的授课和4小时的问答互动与技术辅导环节，以下为课程计划涉及的系列主题：

主题

主要内容

强化学习导论

强化学习的算法和框架；遗传算法，帕累托前沿

强化学习与深度学习的联系（Transformers模型、图形神经网络）；强化学习案例分析；

如何撰写相关文章

科学计算工具简介

JupyterNotebook的基本使用以及LaTeX；

强化学习框架中的基本组件；

环境

环境复杂性建模

多智能体强化学习（MARL）

Q-Learning以及Actor-Critic模型

基于政策的学习；

马尔可夫决策过程、动态编程和贝尔曼方程；

强化学习与深度学习的联系

强化学习框架中的基本组件；

OpenAIGym简介

优化

强化学习与控制优化

深度Q网络

强化学习案例

Transformers模型和图像分析集成

Pytork简介；备份图；

使用马尔可夫决策过程进行优化（动态编程、贝尔曼方程、策略迭代、值迭代）

集成与控制

机器人与贡献度分配问题

冗余度机器人的自适应运动控制

多智能体强化学习与机器人

强化学习与其他深度学习技巧的整合；

与图形神经网络的集成；关注和信息传递模型；

与AUTO-ML和ML系统的集成；

无模型算法

基于价值的算法（蒙特卡罗、时间差分学习、SARSA、Q-learning、DQN及其变体）

基于策略的算法（策略梯度、增强）；

Actor-Critic算法

图神经网络（GNN）与强化学习

图示学习与强化学习的关联

图神经网络：高级建模

图神经网络练习

监管图神经网络

图神经网络与游戏的理论与运用

DGL,Spektral,Pytorch

无监管图神经网络

图神经网络与机器人

DGL,Spektral,GeometricPytorch

【文化活动】

除核心课程之外，项目学生还可充分体验剑桥大学的校园生活。剑桥大学的学生助理将为学生安排组织一系列丰富多彩的文化活动，包括参观游览其它的剑桥学院（如国王学院、三一学院等）、泛舟举世闻名的康河、享用传统的英式下午茶，在格顿学院历史悠久的宴会厅享用正餐，参观剑桥大学的菲茨威廉艺术与考古博物馆、各类体育、联谊、猜谜或桌游活动、体验当地的传统酒吧等。此外，项目还会专门安排一次去伦敦的游览，参访国会大厦、白金汉宫、大英博物馆、英国国家美术馆等地标性景点，为学生创造机会体验更多英伦名城的风采。

参加暑期项目的学生均可获得剑桥大学格顿学院提供的访学项目证件，按院方规定使用相关校园设施。

【项目日程】