大数据分析技术架构解决方案.pptxVIP

大数据分析技术架构解决方案;技术基础研究方向;开创了基于人类视觉智能的动态目标捕捉、跟踪和行为分析的研究，在国内外杂志、会议发表了多篇高水平论文。 获得视频识别，知识学习与推理相关发明专利2项，申请发明专利7项。;大数据技术来实现国家经济免疫系统;房地产大数据;碳交易;目录;数据挖掘越来越多的应用到了各个领域中，主要包括与客户关系管理相关的模型、与风险控制相关的模型、与生产销售预测相关的模型等; 产品名 ;关系型数据库;特点一;特点二;特点三;功能模块;目录; 交互式查询;技术架构解决方案-分布式内存计算;技术架构解决方案-交互式查询;技术架构解决方案-实时在线处理;事件驱动计算模型，系统处于持续不断计算之中，事件响应延迟在毫秒~秒级。 流式计算系统处理应用的处理逻辑是由源源不断的数据流驱动。 典型应用场景 有金融在线欺诈预警 广告CTR 推荐系统;技术架构解决方案-批处理及离线挖掘;目录;项目需求 将总行下发的数据及核心业务数据，经过数据整理、加载到省级数据中心，并进行各项业务快速应用开发 数据源 某省公积金中心，近五年的操作、交易记录，共10亿条左右。 系统环境 4台X86架构的PC服务器，共128G内存 单台服务器，8核CPU,32G内存 解决方案 Hbase导入海量数据，并支撑大数据查询 可视化设计、可视化报表实现了数据的实时分析 ;行业应用案例-金融;行业应用案例-金融;持卡客户多维分析： 持卡客户人口统计特征分析 持卡客户交易行为模式分析 持卡客户应用场景分析 特约商户多维分析： 商户基本信息分析/商户业务收益分析 商户价值贡献度评估／商户收单风险分析 持卡客户和特约商户双向分析 特定特征客户特定时间消费商户分布分析 特定时间在特定商户消费的客户特征分析;项目需求 烟草工业企业目前积累了大量的数据信息，管理方式由粗放式管理转为精细化管理，产生了利用大数据技术收集、管理和展示分析结构化和非结构化的数据和信息的诉求，于是如何利用这些数据创造更大的价值、为领导决策和企业精益管理提供有力支撑成为重要的课题。 数据存储 近1年数据，每秒钟10000个数据采集点 系统环境 硬件环境： 数据库服务器1台+4台分布式pc server 单台4核，16G内存 解决方案 流处理模块处理设备实时数据流 事件预警开发平台，实现问题预警 基于ETHINK数据挖掘建模分析平台,实现疑点挖掘建模 可视化报表设计，完成大数据精益管理;设备健康指数模型：利用数据聚类分析、特征分析、变化和偏差分析等数据挖掘方法分析工厂生产、质量、设备健康状况，实现指标关联分析及问题挖掘目的。;1、Genius only means hard-working all ones life. (Mendeleyer, Russian Chemist)? 天才只意味着终身不懈的努力。20.8.58.5.202011:0311:03:10Aug-2011:03 2、Our destiny offers not only the cup of despair, but the chalice of opportunity. (Richard Nixon, American President )命运给予我们的不是失望之酒，而是机会之杯。二〇二〇年八月五日2020年8月5日星期三 3、Patience is bitter, but its fruit is sweet. (Jean Jacques Rousseau , French thinker)忍耐是痛苦的，但它的果实是甜蜜的。11:038.5.202011:038.5.202011:0311:03:108.5.202011:038.5.2020 4、All that you do, do with your might; things done by halves are never done right. ----R.H. Stoddard, American poet做一切事都应尽力而为，半途而废永远不行8.5.20208.5.202011:0311:0311:03:1011:03:10 5、You have to believe in yourself. Thats the secret of success. ----Charles Chaplin人必须相信自己，这是成功的秘诀。-Wednesday, August 5, 2020August 20Wednesday, August 5, 20208/5/2020 6、Almost any situation---good or bad---is affected by the attitude we bring to. ----Lucius Ann