- 70
- 0
- 约6.06万字
- 约 12页
- 2019-04-09 发布于北京
- 举报
尊敬的评审专家-南京大学PASA大数据实验室.PDF
修改说明
尊敬的评审专家:
您好!首先,衷心感谢评审专家提出的宝贵意见。针对各位专家提出的问题,我们进行了认真的修
改,详细修改说明如下 (修改文字详见论文中高亮部分):
修改意见1:当MapReduce 程序的Map 任务不是I/O 密集型时,在Reduce 阶段依然会产生大量I/O 操作,
此时Reduce 程序的负载均衡问题就不能再简单地用文中所提方法,作者的方法需要改进。
修改结果:已修改
本文提出的负载均衡方法本质上解决的是 shuffle 阶段partition 函数分区不均导致的Reduce 任务负载
不均衡、从而影响连接查询的整体执行效率问题。对于评审专家所描述的“当Map 任务不是I/O 密集型时,
在Reduce 阶段依然会产生大量I/O 操作”的情况,本文提出的负载均衡方法基于的Reduce Join 就是符合
这种情形的一种连接算法,但原文没有描述清楚。因此,在修改文中我们做了进一步的描述,以便读者能
够清楚了解本文提出的负载均衡方法。修改文字如下 (对应文中标蓝部分):
Reduce Join[14] 的Map 阶段仅负责将参与连接的数据表中的记录解析成
您可能关注的文档
- 基于FLEXSIM的流水线生产物流优化-物流产业大数据平台.PDF
- 基于FPGA和DDS技术的激光测距仪-中国科技论文在线.PDF
- 基于FPGA的高速实时数据采集存储系统-NSFC.PDF
- 基于iSCSI协议校验算法的改进.PDF
- 基于LabVIEW实时温度采集系统的设计.PDF
- 基于LabVIEW的双踪虚拟示波器的设计.PDF
- 基于Linux的SoPC应用系统设计-Core.PDF
- 基于MapReduce模式的NSTL用户热点检索词与-数字图书馆论坛.PDF
- 基于MapReduce的文本语句向量算法实现.PDF
- 基于MSP430的便携式钢丝绳张力测试仪的研制.PDF
- 【学习课件】第十九章强制执行通.pptx
- 【学习课件】第十九章恶性肿瘤.pptx
- 【学习课件】第十九章民事执行.pptx
- 2026秋冀教版义务教育英语九年级上册Unit 5 Culture shapes us! 大单元整体教学设计[2022课标2025修改].pdf
- 2026秋冀教版义务教育英语九年级上册Unit 4 Great people 大单元整体教学设计[2022课标2025修改].pdf
- 2026秋冀教版义务教育英语九年级上册Unit 6 Looking into science 大单元整体教学设计[2022课标2025修改].pdf
- 2026秋冀教版义务教育英语九年级上册Unit 6 Looking into science 大单元整体教学设计[2022课标2025修改].docx
- 环境相关因素对绿色债券定价影响初探.pdf
- 【学习课件】第十三章:生产成本.pptx
- 【学习课件】第十三章:简单国民收入决定理论.pptx
最近下载
- Q CR 9204-2015 铁路建设项目工程试验室管理标准.pdf VIP
- 心理学-沙盘分析与解读.ppt
- 1_TM110S KSE-S内部培训资料.pdf VIP
- 城市轨道交通轨道设备运营维保方案(终稿)(95).docx VIP
- 小学科学新青岛版(六三制)五年级上册第一单元 生活在空气中教案(2026秋).doc
- 人工智能训练师 课件 第一章 人工智能概述.pptx
- 长度与时间的测量PPT.ppt VIP
- 2026年部编版小学二年级语文上册课时《姓氏歌》教案.docx VIP
- 2026年秋部编版九年级语文上册第一单元第4课《沁园春·雪》教案.docx VIP
- 4.2 进入新时代的意义 课件2026统编版道德与法治九年级上册.pptx
原创力文档

文档评论(0)