蔡珉星-厦门大学数据库实验室2014暑期奋战总结.pptVIP

2014暑假奋战70天活动总结 报告人：蔡珉星 厦大数据库实验室 2014-09-13 遇到的问题 目录 出勤情况 学习内容 奋战成果 心得感受 Part 1 出勤情况 请假三天（7月22号-7月24号），其余奋战时间均按时出勤。 出勤情况 Part 2 学习内容 分为两个阶段：7月1号到7月27号，7月29号到9月9号。 学习内容 7月1号到7月27号： 因为参加阿里巴巴的大数据竞赛，且距离比赛结束还有最后一个月，因此这个阶段主要是投入到该比赛中，同时当了小学期课程《高级C语言》的助教。 在该阶段，除了学习推荐系统的相关知识，并编程实现外，也做了4题Leetcode上的题目，不过觉得算法类的知识容易遗忘，因此决定还是等到快找实习时再继续做题。 同时在该阶段，阅读了《Hadoop权威指南》，搭建了Hadoop集群，并写了关于搭建Hadoop集群的教程。 分为两个阶段：7月1号到7月27号，7月29号到9月9号。 学习内容 7月1号到7月27号： 因为参加阿里巴巴的大数据竞赛，且距离比赛结束还有最后一个月，因此这个阶段主要是投入到该比赛中，同时当了小学期课程《高级C语言》的助教。 在该阶段，除了学习推荐系统的相关知识，并编程实现外，也做了4题Leetcode上的题目，不过觉得算法类的知识容易遗忘，因此决定还是等到快找实习时再继续做题。 同时在该阶段，阅读了《Hadoop权威指南》，搭建了Hadoop集群，并写了关于搭建Hadoop集群的教程。 分为两个阶段：7月1号到7月27号，7月29号到9月9号。 学习内容 7月29号到9月9号： 阿里巴巴的大数据竞赛结束之后，就全心投入到阅读关于数据倾斜情况下基于MapReduce的Join算法的相关论文。 在这个阶段一共阅读了48篇论文，且主要以精读为主。 不过长时间的阅读论文也带来了一定的疲惫感，因此还重温了PHP官方手册，以及阅读了《PHP核心技术与最佳实践》一书，并了解了下目前较为热门的微信公众号开发，巩固提升了自己Web开发方面的知识。 分为两个阶段：7月1号到7月27号，7月29号到9月9号。 学习内容 7月29号到9月9号： 阿里巴巴的大数据竞赛结束之后，就全心投入到阅读关于数据倾斜情况下基于MapReduce的Join算法的相关论文。 在这个阶段一共阅读了48篇论文。 不过长时间的阅读论文也带来了一定的疲惫感，因此还重温了PHP官方手册，以及阅读了《PHP核心技术与最佳实践》一书，并了解了下目前较为热门的微信公众号开发，巩固提升了自己Web开发方面的知识。 Part 3 奋战成果 奋战成果 1. 阅读了48篇论文，其中精读至少有30篇。 2. 一共做了6次报告：《厦大数据库实验室综合考试》、《MapReduce编程简介》、《分布式数据仓库查询优化》、《Partition类和布隆过滤器》、《数据倾斜情况下基于MapReduce的Join算法优化》、《Skew Join相关论文》。 3. 阅读了两本书籍：《Hadoop权威指南》、《PHP核心技术与最佳实践》。 4. 完成了阿里巴巴大数据竞赛，成绩第60名（初赛7500个队伍，复赛600个队伍）。 5. 在自己的博客上发布了20篇文章。 6. 掌握了微信公众平台的开发。 Part 4 心得感受 心得感受 专注、付出，才能有所成就。 心得感受 以往的暑假，虽然在家里也会看点书、学点知识，但跟这次的奋战活动相比，效率、成效显然是差了不少的。 70天的奋战，首先是纠正了我的作息规律，以往都是晚睡晚起，奋战期间都做到早起，按时出勤。并且在奋战期间也有注意锻炼身体，保持至少每周至少一次的锻炼。 阅读论文期间，特别是后半阶段开始阅读《PHP核心技术与最佳实践》，能深切体会到专注对于提升的帮助。以前学习一样东西，通常都是拖长战线，陆陆续续的学习，并不能起到很好的效果。此次奋战，集中精力学习，确实对知识的掌握会更为有效，例如论文，虽然看英文的论文稍有些吃力，体现在阅读速度较慢，一些专业词汇表达的意思也不能理解得很到位，但随着论文阅读数量的增加，这些不太清楚的地方会再次出现，渐渐地对其就会有了一定的理解。而对于MapReduce的连接算法和MapReduce任务的执行流程，也随着论文的阅读，了解了一些以往所不知道的细节，从而有了更为深入的掌握。 研一已经过去了，很快也就会迎来实习、招聘，我也应当以这种专注的状态，继续学习更多知识。 总之，这次的奋战，对我有很大的帮助。 * 遇到的问题