Linkoop领象大数据平台白皮书.PDFVIP

Linkoop 领象大数据平台白皮书 V3.0 Linkoop 领象大数据平台为企业级大数据应用提供了数据全生命周期的解决方案，包含了数 据集成、数据管理、数据安全、数据查询以及数据分析的整套分布式大数据平台和计算平台， 帮助企业对海量数据进行采集、存储、治理、分析和挖掘，发现数据价值。 Linkoop 领象大数据平台技术特点 ➢ 业界领先的大数据计算能力 不论是数据导入、清洗、查询、分析还是复杂的机器学习任务，Linkoop 都将这些任务转化 为Hadoop 上的分布式计算任务，充分利用整个大数据集群的计算能力。Linkoop 对计算任 务中的关键操作进行了定制化开发和优化，如数据加载、多维关联等常用操作，在降低使用 难度的同时提高了计算效率，优化后的处理性能可达Hive-tez 的10 倍以上，Spark 的2-10 倍。Linkoop 在电信领域广泛应用，每天处理的新增数据量超过600TB，充分验证了平台数 据处理的性能和稳定性。 ➢ 全图形化的数据处理流程设计 Linkoop 创新性地提供了数据处理流程的图形化开发界面，使得在大数据平台上的数据处理 不需要编写Hadoop 代码，只需要通过鼠标拖拽添加功能组件，设定功能组件的运行参数和 功能组件之间的依赖关系，就能够完成大数据处理流程的定义。对于定义完成的数据处理流 程，能直接生