6第六章__任务分配与负载平衡题稿.ppt

北京邮电大学 高级操作系统 北京邮电大学 * 北京邮电大学 Outline 第六章 任务分配与负载平衡 北京邮电大学 第六章 任务分配与负载平衡 6.1 任务分配 6.2 负载平衡 北京邮电大学 6.1 任务分配 任务 若干个模块构成一个任务，一个任务是单一的处理实体。 任务分解 把一个提交的任务划分成若干个独立的，具有最小IMC的模型。 IMC:每对模块间的数据传递。 IPC:处理机间的通信。 北京邮电大学 6.1 任务分配 任务划分 粒度大，降低并行度，粒度小，进程切换和通信的开销就会增加。 划分方法 水平或垂直划分：在给定的任务优先图中水平或垂直划分；关键路径（最长路径） 通信延迟最小划分：把通信频繁的节点归成一类。 任务复制 在各个处理机节点上复制任务来降低通信开销。 北京邮电大学 6.1 任务分配 任务分配 把这些模块分配给处理机，使它们由于处理机间的通信引起的开销最小。 一般算法假设 存储容量无限 每个处理机节点有相同的处理能力 忽略网络拥塞 评价准则 CPU的利用率最大化 平均响应时间最小化 北京邮电大学 6.1 任务分配 常见分配算法或策略 基于图论的分配策略 0-1程序设计策略 “合一 ——阈值”启发式分配算法 改进的启发式分配算法 基于进化（演化）算法的策略 遗传算法 模拟退火算法 北京邮电大学 6.1 任务分配 遗传算法求解方法 1、编码方法(Encoding) 用一个n+1位的二进制串来表示： 00000 11111 2、初始化群体(Initialize) 随机生成初始化的串群体。在串群体中，串长度都是相同的，串长为需要分配的文件数。群体的大小根据需要(要求的分配时间等)，按经验或实验给出。 分布均匀的二进制串能使算法更加有效。 北京邮电大学 6.1 任务分配 3、选择 (Selection) 借用达尔文的生物进化论中的自然选择(Natural Selection)思想，按照“适者生存”的原则对串进行复制。用适应度函数计算每个串的适应值，选择适应值高的串，生成下一代，去掉适应值差的串。 北京邮电大学 6.1 任务分配 4、交叉 (Crossover) 交叉是两个串按照一定的概率(交叉概率Pc)从某一位开始逐位互换。这里先在串群体中，随机的选择两个串，成为一对串，变成多对串后，对每对串随机的选择一个交叉点，例如串长为n+1，则可选择一整数i，0≤i ≤n，i为交叉点，对两个串从第0位到第i位进行互换，形成两个新串。是否发生交叉操作，还要受交叉概率的控制，选择好一对串后，在0、1之间产生一个随机数，若该随机数大于Pc则发生交叉，否则保持原状。Pc也是根据经验或实验确定，一般可为0.5左右。 北京邮电大学 6.1 任务分配 5、突变 (Mutation) 二进制串的某一位按照一定的概率(突变概率Pm)发生反转，0变1，1变0。这里Pm较小，Pm可小于0.001. 6、适应度函数(Fitness Function) 这里我们用Evaluation过程来实现。 7、停止条件 可以是以下几种或其组合： 规定进化代数，也就是最大迭代次数。 群体中某个解的适应值达到某一预先规定的范围内。 连续若干代，群体中的个体不再变化。 北京邮电大学 6.1 任务分配 8、相应的遗传算法描述 Begin Initialize; Evaluation; While (not termination-condition) do Begin Selection; Crossover; Mutation; Evaluation End End. 北京邮电大学 6.1 任务分配 基于进化算法的方法有以下优点： 具有一定的规律和随机性，不确定性。为了处理这种特性引入了概率分析。 适用于变化的环境。能得到多个解，即可得到多个分配方案可供选择。 算法具有良好的并行性，进化过程中的群体是一个可行解的集合。适合于并行计算。 北京邮电大学 6.2 负载平衡 什么是负载? CPU队列的长度（比如进程的数目） 某段时间内CPU队列的平均长度 可用内存的大小 上下文切换的速率 系统调用的速率 CPU的利用率 北京邮电大学 6.2 负载平衡 负载平衡 对系统的负载情况进行动态调整，以尽量消除或减少系统中个场点负载不均匀的现象。 由于任务到达的随机性,各节点处理能力上的差异,当系统运行一段时间后，就会出现某些节点还有很多任务没有完成，而另外一些节点处于空闲。 目的： 发挥系统冗余资源 提高资源利用率 防止软件并行性和硬件并行性之间失配 北京邮电大学 6