基于分布式内存计算的深度学习方法.pdfVIP

V01．45 第45卷第3期 吉林大学学报(工学版) No．3 2015年5月 of and 2015 JournalJilin Edition) May University(EngineeringTechnology 基于分布式内存计算的深度学习方法 李抵非1，田 地1，胡雄伟2 (1．吉林大学仪器科学与电气工程学院，长春130021；2．国家标准化管理委员会标准信息中心，北京100088) 摘 要：为了提升深度学习技术并行化学习效率，设计了一种面向计算机集群的分布式内存计 算方法。构建分布式内存环境，建立数据分片处理和多任务调度机制，使模型参数和神经元节 点的计算和存储并行运行于该环境中，避免了磁盘I／O对训练速率的影