项目评审d培训课件.pptVIP

南京领军型科技创业人才引进计划;目录;1.1申报人简介及创业经验;1.2核心团队;;;2.1项目内容概述;Think-bright;海量PPT模板免费下载;海量PPT模板免费下载;海量PPT模板免费下载;2.5技术原理;;2.5企业级-聚门户平台;2.5技术流程图;2.6技术路线;Think-bright; 1、本项目采用基于HADOOP云计算技术，建立分布式云计算系统的基础架构，充分利用云计算和云存储实现了分布式文件系统（Hadoop Distributed File System），简称HDFS。 基于HADOOP的集群高速运算和容错性的威力，使得廉价的PC服务器的组合性能发挥出支撑海量并发和存储的性能。构件了爬藤阅读的超大规模数据聚合和支持大并发用户的特性。 2、本项目中采用了FINGER PRINT冗余消除技术，该技术主要用来实现过滤互联网上重复数据过滤，该技术带来互联网数据业和整个存储业的革命。可以从根本上减少存储占用的空间和用户的磁盘驱动器数量，减轻人力、能源、电力资源等方面的开销，从而大幅度的节约存储成本。 另外，重复数据删除可以减少在网络中传输的数据量，进而降低能量消耗和网络成本，并为数据复制大量节省网络带宽。 3、该项目还采用了信息采集、WEB清洗和相关反馈技术，来确保网页正文采集的准确度。 同时，聚门户产品已经经过严格的开发测试后投入试商用，具备充分的实验依据。