l大数据关键技术之搜索引擎理论与实践通知.docVIP

中国管理科学研究院人才战略研究所 人才所[2014]第（20）号 “大数据关键技术之搜索引擎理论与实践”培训班 各企事业单位： 伴随着移动互联网和物联网发展的浪潮，网络上的数据和信息出现爆炸式的增长。如何从大数据中获取大价值，这是我们这个时代面临的重大挑战，更是我们潜在的重要机遇。搜索引擎作为数据访问和信息获取接基础性设施，正是应对这一挑战的核心利器。 如何洒下笼罩全球的信息获取大网？如何让巨量的信息在我这里各就各位？如何巧妙地实现所需即所得？如何让所有的环节在瞬间完成...？为此，中国管理科学院人才战略研究所特举办“大数据关键技术之搜索引擎理论与实践”培训班，由北京盛博国科企业管理顾问有限公司与盛科博文（北京）文化发展有限公司共同承办，具体事宜如下： 一、培训目标： 全面了解现代搜索引擎的基本原理；重点掌握现代搜索引擎的核心组件；显著提升搜索项目规划和实施能力。 1、课程讲座；?????2、小型Demo讲解；?????3、集群操作； 五、培训对象： 1. 高校、科研院所、文献情报服务部门及企事业单位从事搜索引擎、信息检索、数据挖掘、系统架构、分析等相关工作、科研及开发人员；2、 对本次课程感兴趣的所有爱好者。 主办单位： 承办单位： 中国管理科学研究院人才战略研究所 北京盛博国科企业管理顾问有限公司 2014年12月24日 2014年12月24日 六、培训大纲： 大数据关键技术之搜索引擎理论与实践课程大纲 第一天 搜索引擎基础 1、信息检索理论概述 核心问题 研究内容 相关模型 检索类型 倒排索引 网页排序 2、搜索引擎关键组件 爬虫：如何拿回信息，演示nutch 索引：如何安放信息，演示lucene 查询：如何获取信息，演示elasticsearch 第二天 搜索引擎集群 1.搜索集群 集群的类型 物理集群和虚拟集群 真实的搜索引擎集群 集群化索引：多租户技术 集群化搜索：scattergather模式 2.集群配置 索引的分片 主分片和备分片 数据的路由 搜索的模式scattergather（对比map-reduce） 第三天 搜索引擎相关的 大数据前沿技术 1. 大数据存储 分布式文件系统 HDFS NoSql数据库系统CouchDB 2. 大数据处理 高性能科学计算 MPI 大数据处理 Map-Reduce 内存计算 Spark 3. SOA 轻量级SOA架构 Restful 数据交换规范 JSON 4.轻量级虚拟化 大数据虚拟化 Docker 5.城市大数据搜索 一个前沿的例子 七、培训费用： 每人3900元（含报名费、培训费、资料费、考试费、证书费、午餐费）住宿可统一安排，费用自理。 八、颁发证书： 参加相关培训并通过考试的学员，可以获得： 1． 中国管理科学研究院人才战略研究所颁发的“高级大数据引擎工程师”相关证书。 2. 经培训考试合格后颁发中华人民共和国工业和信息化部《大数据引擎技术应用工程师》职业技术水平证书。 注：请学员带寸彩照2张、身份证复印件张。 　　小故事3、老人与黑人小孩子 　　一天，几个白人小孩在公园里玩。这时，一位卖氢气球的老人推着货车进了公园。白人小孩一窝蜂地跑了上去，每人买了一个气球，兴高采烈地追逐着放飞的气球跑开了。白人小孩的身影消失后，一个黑人小孩怯生生地走到老人的货车旁，用略带恳求的语气问道：“您能卖给我一个气球吗?” 　　“当然可以，”老人慈祥地打量了他一下，温和地说，“你想要什么颜色的?” 　　他鼓起勇气说：“我要一个黑色的。” 　　脸上写满沧桑的老人惊诧地看了看这个黑人小孩，随即递给他一个黑色的气球。 　　他开心地接过气球，小手一松，气球在微风中冉冉升起。 　　老人一边看着上升的气球，一边用手轻轻地拍了拍他的后脑勺，说：“记住，气球能不能升起，不是因为它的颜色，而是因为气球内充满了氢气。” 　　大道理：成就与出身无关，与信心有关。这个世界是用自信心创造出来的。有自信，积极的面对自己所拥有的一切，这种积极和自信会帮助人登上成功的山顶。 　　小故事4、囚禁的章鱼 　　一只章鱼的体重可以达70磅。但是，如此庞大的家伙，身体却非常柔软，柔软到几乎可以将自己塞进任何想去的地方。 　　章鱼没有脊椎，这使它可以穿过一个银币大小的洞。它们最喜欢做的事情，就是将自己的身体塞进海螺壳里躲起来，等到鱼虾走近，就咬断它们的头部，注入毒液，使其麻痹而