《强化学习理论与应用》环境.pptVIP

目录12024/10/30PyTorch简介2.12.3强化学习的开发环境2.2PyTorch和TensorFlow2.4Gym实验环境

对于从事深度强化学习研究的相关工作人员而言,选择一个好的工具势必会事半功倍。。PyTorch是Facebook公司在深度学习框架Torch基础上,使用Python重写的一个全新的框架。PyTorch还拥有丰富的API,可以快速完成深度神经网络模型的搭建和训练。22024/10/302.1PyTorch简介（1）

PyTorch:美国互联网巨头Facebook公司使用Python开发的一个深度学习框架；框架设计理念先进，在调试、编译等方面的优势，迅速占领GitHub热度榜榜首；不是简单地封装Lua、Torch，提供Python接口，而是对Tensor之上的所有模块进行了重构。2.1PyTorch简介（2）3

目录42024/10/30PyTorch简介2.12.3强化学习的开发环境2.2PyTorch和TensorFlow2.4Gym实验环境

2.2?PyTorch和TensorFlow（1）5Tensorflow创建的是静态图Tensorflow在定义模型的整个计算图之后才开始运行机器学习模型；PyTorch创建的是动态图PyTorch的计算图是在运行时创建的,可以随时定义、随时更改、随时执行节点；

2.2?PyTorch和TensorFlow（2）6?Tensorflow的学习曲线陡峭 使用Tensorflow,需要先理解Tensorflow的一些工作机制（比如会话（session）、占位符（placeholder）等）。PyTorch学习曲线简单 PyTorch更贴近Python语言,建立机器学习模型时也更直接、符合人的思维。

目录72024/10/30PyTorch简介2.12.3强化学习的开发环境2.2PyTorch和TensorFlow2.4Gym实验环境

Windows环境所需要的系统软件:test目录文件为环境测试用例。相关软件的下载网址:Visual:/downloadAnaconda:Gym:gitclone/openai/gym.git（需要安装Git）2.3强化学习的开发环境（1）

Windows环境步骤第一步:在windows下，点击执行，安装VisualStudio。安装时只需勾选“使用C++的桌面开发”，等待安装完成后重启电脑。2.3强化学习的开发环境（2）

Windows环境步骤第二步:在windows下，点击执行，安装Anaconda。注:Anaconda安装完成后，通过窗口菜单“AnacondaPrompt”进入Anaconda环境。使用清华镜像:pipconfigsetglobal.index-url/simple2.3强化学习的开发环境（2）

Windows环境步骤在Anaconda环境中可以创建和维护自己的环境:2.3强化学习的开发环境（3）创建环境:condacreate--namerlpython=3.7安装swig:condainstallswig（必做）查看环境:condaenvlist激活环境:condaactivaterl退出环境:condadeactivate删除环境:condaremove–-namerl–all

Windows环境步骤第三步:在Anacondarl下，执行“pipinstalljupyter”,安装JupyterNotebook。根据需要可以安装其他软件包:绘图库:pipinstallmatplotlib数据统计库:pipinstallpanda进入安装测试目录“实验代码”，执行“jupyternotebook”命令，测试安装是否成功。2.3强化学习的开发环境（4）

Windows环境步骤第四步:在Anacondarl下，进入目录“Gym”，执行:pipinstall-e“.[all]”或pipinstall-egym[all]进入安装测