大数据深度挖掘技与大数据应用...ppt

目录 联合实验室 大数据分析平台 产品技术架构 典型行业应用案例 项目需求 将总行下发的数据及核心业务数据，经过数据整理、加载到省级数据中心，并进行各项业务快速应用开发 数据源 某省公积金中心，近五年的操作、交易记录，共10亿条左右。 系统环境 4台X86架构的PC服务器，共128G内存 单台服务器，8核CPU,32G内存 解决方案 Hbase导入海量数据，并支撑大数据查询 可视化设计、可视化报表实现了数据的实时分析 行业应用案例-金融 行业应用案例-金融 系统由对公客户综合积分子系统、展业通客户综合收益分析子系统、授信客户资金结算子系统、对公柜面交易流水分析子系统等组成 行业应用案例-金融 项目需求 整合第三方支付数据资源，分析挖掘客户交易、反馈信息、交易行等数据，实现精准营销，最大限度地提升产品价值 数据源 某第三方支付平台交易、反馈数据，月交易记录量1亿条。 系统环境 ６台X86架构的PC服务器，共96G内存 单台服务器，8核CPU,16G内存 解决方案 Hbase导入海量数据，并支撑大数据查询 Hive对历史交易数据进行分析 可视化设计、可视化报表实现数据的实时分析 基于ETHINK可视化挖掘平台，完成精准营销建模 持卡客户多维分析： 持卡客户人口统计特征分析 持卡客户交易行为模式分析 持卡客户应用场景分析 特约商户多维分析： 商户基本信息分析/商户业务收益分析 商户价值贡献度评估／商户收单风险分析 持卡客户和特约商户双向分析 特定特征客户特定时间消费商户分布分析 特定时间在特定商户消费的客户特征分析 行业应用案例-金融 项目需求 烟草工业企业目前积累了大量的数据信息，管理方式由粗放式管理转为精细化管理，产生了利用大数据技术收集、管理和展示分析结构化和非结构化的数据和信息的诉求，于是如何利用这些数据创造更大的价值、为领导决策和企业精益管理提供有力支撑成为重要的课题。 数据存储 近1年数据，每秒钟10000个数据采集点 系统环境 硬件环境： 数据库服务器1台+4台分布式pc server 单台4核，16G内存 解决方案 流处理模块处理设备实时数据流 事件预警开发平台，实现问题预警 基于ETHINK数据挖掘建模分析平台,实现疑点挖掘建模 可视化报表设计，完成大数据精益管理 行业应用案例-烟草 设备健康指数模型：利用数据聚类分析、特征分析、变化和偏差分析等数据挖掘方法分析工厂生产、质量、设备健康状况，实现指标关联分析及问题挖掘目的。 行业应用案例-烟草 谢 谢！ 　(二)、审计“免疫系统”的作用和方式　　审计作为经济社会运行的一个免疫系统，能够最早地感受到病害侵蚀的风险，更早地揭示病害侵蚀带来的危害，更快地运用法定职能去抵御、查处这些病害，及时建议政府或相应的权力机关运用各种资源去消灭病害，从而健全制度，保护国家安全。　　在经济运行中选择带有普遍性、苗头性的现象进行重点审计，发挥审计在财经领域的监督作用，在经济社会领域的建设性作用，在民生领域的保障作用。不断提高审计质量，从体制、机制和管理上有针对性地提出审计意见和建议，探索建立有效的审计预警和防范机制，为领导作出科学决策提供可靠的依据。　　审计机关通过和被审计单位建立联系制度，将审计监督的“关口”前移，利用专业技术优势对被审计单位存在的管理漏洞和潜在的风险主动进行修复和抵御，对可能发生的违规违纪问题早发现、早预防，真正做到“未雨绸缪，防患于未然”。　　(三)、发挥审计成果作用是“免疫系统”机制的重要保障　　审计项目的实施，可以产生一系列的审计成果，综合利用这些成果，可以综合发挥审计“免疫系统“的抵御、削灭、修复功能。　　一是通过审计报告、决定、责令被审计单位整改审计问题，完善内部管理，提高经济效益，发挥审计免疫系统对侵入被审计单位”病毒“的抵御、消灭和制度修复功能，促进微观经济实体健康运行。　　二是通过审计专报、移送，将重大违法违规问题及其相关人员，移送司法等职能部门处理，增强对违法犯罪行为的威慑作用，进一步延伸并强化审计免疫系统的消灭病毒的功能，从而推进廉政建设，促进政权的巩固和政府机关的高效廉洁运行。　　三是通过审计信息，将涉及宏观经济管理、体制机制、政策措施等问题及时向党委、政府反映，提出审计建议，完善体制、机制存在的缺陷，促进改善宏观调控。 * 目录 联合实验室 大数据分析平台 产品技术架构 典型行业应用案例 技术基础研究方向 研究方向 关键任务 制高点 大数据 可视化挖掘 1）新型内存迭代数据挖掘算法 2）数据挖掘可视化开发平台 3）房地产、金融、电信等机器学习模型研究 1）基于内存计算的机器学习算法 2）行业大数据深度机器学习模型 3）大数据可视化挖掘 大数据 内存计算 1）基于内存的迭代算法研究 2）内存