强化学习在分布式电推进飞机动力偏航控制中的应用探索.docxVIP

强化学习在分布式电推进飞机动力偏航控制中的应用探索

目录

内容概要．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．3

1.1研究背景与意义．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．3

1.1.1分布式电推进技术发展现状．．．．．．．．．．．．．．．．．．．．．．．．．．．．．7

1.1.2飞机动力偏航控制挑战分析．．．．．．．．．．．．．．．．．．．．．．．．．．．．．7

1.1.3强化学习技术应用前景．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．8

1.2国内外研究综述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．9

1.2.1传统偏航控制方法评析．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．10

1.2.2强化学习在飞行控制领域应用．．．．．．．．．．．．．．．．．．．．．．．．．．12

1.2.3相关研究不足与展望．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．15

1.3研究目标与内容．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．16

1.3.1主要研究目的界定．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．17

1.3.2核心研究内容概述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．18

1.4技术路线与论文结构．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．19

相关理论与技术基础．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．21

2.1强化学习基本原理．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．23

2.1.1基本概念与要素介绍．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．24

2.1.2经典强化学习算法概述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．26

2.2分布式电推进系统特性．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．28

2.2.1系统架构与工作模式．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．29

2.2.2动力输出特性分析．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．31

2.3飞机动力偏航动力学模型．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．33

2.3.1偏航运动方程建立．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．35

2.3.2模型简化与假设条件．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．36

基于强化学习的偏航控制策略设计．．．．．．．．．．．．．．．．．．．．．．．．．37

3.1控制问题建模．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．38

3.1.1状态空间定义与描述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．40

3.1.2动作空间设定与分析．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．41

3.1.3奖励函数函数设计原则．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．43

3.2强化学习算法选择与改进．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．44

3.2.1常用算法比较评估．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．45

3.2.2针对性算法改进方案．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．47

3.3算法实现细节．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．49

3.3.1训练环境搭建．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．51

3.3.2神经网络结构设计．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．52

仿真实验与结果分析．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．53

4.1仿真平台搭建．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．55

4.1.1仿真软件选择与配置．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．58

4.1.2环境参数设置．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．59