基于多智能体的智能工厂生产调度研究.pdf

摘要

智能工厂是智能制造的主要载体，智能生产调度是智能工厂运行的核心。智能工

厂环境中，因不确定性、干扰性因素较多，要求生产调度系统具有动态性、实时性、

自适应性；同时，智能工厂生产调度具有大数据驱动、分布式协同等特点，因此，传

统生产调度方法很难适应智能工厂生产调度要求。针对智能工厂的智能生产调度需求，

本文采用多智能体（Multi-Agent）与强化学习集成的方法，对智能工厂生产调度问题

进行了研究，并研发其原型系统。具体研究内容如下：

（1）基于MAS的智能车间双层调度结构设计。首先对智能工厂体系结构及调度

流程进行分析，明确了智能工厂生产调度具有分布式及敏捷性等特性；基于此结合多

智能体技术建立了面向智能工厂的分层分布式车间调度结构，其中对智能体的功能及

结构进行详细论述。

（2）面向智能工厂的分布式作业车间调度研究。在双层多智能体调度体系结构

下，首先对智能工厂分布式车间调度问题进行分析，其次描述了基于多智能体的双层

调度机制，上层提出一种集成Q强化学习与合约网的动态调度方法以实现将任务合理

分配到加工车间，下层采用启发式调度规则实现车间局部调度决策。最后通过构建算

例来验证双层架构下调度机制的有效性。

（3）基于多智能体的柔性作业车间自适应调度研究。提出了一种基于多智能体

的分布式调度体系结构来解决动态柔性作业车间调度问题，重点是实现最小化迟到惩

罚和降低机器总负载的两个实际目标。首先通过数学建模对调度问题并进行描述，然

后描述了多智能体的自组织协商机制，其中工件智能体及设备智能体分别调用自己的

调度决策模块来完成任务分配及缓冲区作业排序；其中利用近端策略优化（PPO）算

法对调度决策模块进行训练，以此实现智能体的自学习过程。最后，通过调度算例对

所提出的调度方法有效性进行验证。

（4）车间调度原型系统设计与开发。基于Java的JADE框架对调度系统进行开

发，其中设计了相应的功能模块以及相关的系统软件架构，同时还设计了相关的数据

库系统。最后对调度系统的核心功能进行了介绍。

研究结果表明，在所提出的双层分布式调度机制下，采用集成强化学习及多智能

体技术能很好解决智能工厂的调度问题，有利于提升了企业应对动态因素的快速响应

与自适应能力。

关键词：智能工厂，多智能体系统，分布式调度，协商机制，JADE

论文类型：应用研究

ABSTRACT

Intelligentfactoryisthemaincarrierofintelligentmanufacturing,andintelligentproduction

schedulingisthecoreofintelligentfactoryoperation.Intheenvironmentofintelligentfactory,

becausetherearemanyuncertainandinterferingfactors,theproductionschedulingsystemis

requiredtobedynamic,real-timeandself-adaptive.Atthesametime,smartfactoryproduction

schedulinghasthecharacteristicsofbigdatadriven,distributedcooperation,soitisdifficult

fortraditionalproductionschedulingmethodstomeettherequirementsofsmartfactory

productionscheduling.Aimingattheintelligentproductionschedulingrequirementsof

intelligentfactories,thispaperadoptsthemethodofMulti-Agentandreinforcementlearning

integrationtostudytheproductionschedulingproblemofinte