西安交大并行计算理论赵银亮课件第七章.pptVIP

映射技术最小化空闲 映射必须同时最小化空闲和平衡负载，只平衡负载不会最小化空闲。 最小化空闲的映射技术 静态和动态的映射技术 静态映射：任务预先映射到进程（a-priori）。要这样做，我们必须对每个任务的大小有很好的估计，即使在这种情况下，这个问题也是NP完全的 动态映射：任务在运行时映射给进程。这可能是因为任务产生于运行时，或者任务的尺寸不知道。 其他决定技术选择的因素包括关联给任务的数据大小以及领域的性质。 静态映射模式 基于数据划分的映射 基于任务图划分的映射 复合的映射 基于数据划分的映射 按块数组分布模式 块数组分布模式也可推广到高维. 块数组分布模式的例子 对于稠密矩阵A和B相乘，我们可以使用块分解来划分输出矩阵C. 考虑到负载均衡，我么给予每个任务相同数量的矩阵C的因素. (注意到每个C因素对应一单个点积.) 选择精确的分解 (1-D 或 2-D)由涉及到的通信开销决定. 通常，高维分解允许更多的进程用上. 稠密矩阵乘法中的数据共享 循环与块循环分布 如果与数据关联的计算量是变化的，块划分可能导致显著的负载不均衡. 一个简单例子出现在稠密矩阵的LU分解（高斯消去法）中. 稠密矩阵的LU分解 块循环分布 高斯消去法中的块循环分布 块循环分布的例子 块循环分布 基于数据分解的图划分 对于稀疏矩阵, 块分解更为复杂. 考虑稀疏矩阵乘向