- 3
- 0
- 约1.74万字
- 约 153页
- 2023-11-08 发布于陕西
- 举报
;;;;;(1)系统架构设计
从数据类型上看,除传统的结构化数据外,还产生了大量日志、工单等半结构化数据,图像、声音等非结构化数据。
从数据处理速度上看,随着数据的不断增加,传统计算框架的数据计算性能问题会逐渐显现,需要基于大数据技术来扩展计算能力。;风险智能预警平台设计中应用大数据技术的优点:
提高系统扩展性。主流的 Hadoop大数据框架,其核心是分布式计算和存储架构。可根据业务需求灵活调整。
降低投资成本。大数据技术的架构对底层硬件设备的要求并不高,可以采用价格低且通用的硬件设备。
高效数据分析。大数据技术采用节点分布式架构,数据存储于多个节点上,可以并行进行大量数据的分析和处理,用于海量数据分析及挖掘,提高数据分析的效率。;采用层次化、模块化集成架构设计,自下而上分别是底层架构层、数据处理层、数据分析层和前端交互层。;①底层架构层:
底层架构层采用 Hadoop MapReduce分布式计算架构设计,可并行支持多个物理节点和同一节点内多台服务器的分布式并行计算。有可扩展性,并可根据计算需求,对计算节点和节点内的计算服务器进行扩展。
数据的一致性的要求不高,采用基于 NoSQL集群存储架构设计,通过存储虚拟化技术组成统一的存储资源池,构建全局统一命名空间;可支持区域节点、节点内服务器和服务器容量的三级扩展;每套集群存储系统支持检索特征(数据索引等)带外数据存储,提升海量信息的
您可能关注的文档
- 任务五 了解安全软件.pptx
- 任务六 了解双机软件.pptx
- 汽车单片机应用技术:(美化)3汽车单灯闪烁控制.pptx
- 任务一 熟悉日志标准化.pptx
- 任务二 熟悉全链路追踪.pptx
- 任务三 熟悉SLA的统一.pptx
- 任务一 了解智能化运维的方法.pptx
- 任务四 了解传统的故障定位方法.pptx
- 任务五 了解人工智能在故障定位领域的应用.pptx
- 任务一 了解金融科技.pptx
- JJF 2445-2026IMT-2020(5G)移动通信综合测试仪校准规范.pdf
- 计量规程规范 JJF 2460-2026近距离治疗用井型电离室剂量仪校准规范.pdf
- 《JJF 2484-2026基于用户黏着度的大数据推荐算法测评方法》.pdf
- JJF 2484-2026基于用户黏着度的大数据推荐算法测评方法.pdf
- 计量规程规范 JJF 2484-2026基于用户黏着度的大数据推荐算法测评方法.pdf
- JJF 2028.3-2026冲击电压、冲击电流测量系统校准规范 第3部分:冲击用数字记录仪.pdf
- 计量规程规范 JJF 2447-2026数字移动通信综合测试仪多入多出(MIMO)参数校准规范.pdf
- JJF 2447-2026数字移动通信综合测试仪多入多出(MIMO)参数校准规范.pdf
- 《JJF 2447-2026数字移动通信综合测试仪多入多出(MIMO)参数校准规范》.pdf
- 计量规程规范 JJF 2482-2026随机数生成器可信度测评方法.pdf
最近下载
- DL_T 924-2016火力发电厂厂级监控信息系统技术条件.pdf
- “四农普”综合试点清查摸底业务培训班测试测试卷及答案.docx VIP
- 承插型盘扣式脚手架检查验收表.docx VIP
- 脑变性疾病及脱髓鞘疾病影像学诊断.ppt VIP
- 赛普-英才组织管理手册.doc VIP
- 赛普-郑州新长城房地产组织管理手册).doc VIP
- 第8课《中国人失掉自信力了吗》课件(内嵌视频)2026-2027学年统编版语文九年级上册.pptx VIP
- 赛普-朗基地产组织管理手册.doc VIP
- 赛普-三盛集团组织管理手册.doc VIP
- 三碁(SAVCH)S1100系列变频器Vf通用型快速使用手册V1.1.pdf
原创力文档

文档评论(0)