? ?
?
? ?
大数据运作原理是什么
?
? ?
?
?
?
?
?
?
?
? ? ?
?
?
?
?
?
近几年A(人工智能)B(大数据)C(云计算)发展火热,由于笔者在一二线互联网行业从事过大数据相关工作,因此决定在大数据领域对自己的所见所闻,来对该行业之外的人士所做一个讲述,以及对想进入刚行业的从业人员做个简单的讲述和分享。
大数据首先重要的就是数据,数据从哪里来,到哪里去,这个是我们需要探讨的。首先确定你数据量TB级别、PB级别 or EB级别。上图讲述了数据的来源从用户的数据、购买数据,以及最终的去处:存储、分析。因此可以看出大数据的核心其实是数据。
以笔者所在的电商平台为例(其他行业同样如此),用户在商城上购买商品,是基于在线交易系统的,称作为OLTP(联机事务)。而由于商城上每天都会产生这些信息,我们就需要把这些交易数据抽取到大数据这边,即:数据仓库。
数据仓库是用来存储所有的数据,包括用户的所有信息,购买记录、用户基本信息等等。然后对数据仓库中的数据做处理,构建数据集市,再对数据进行分析。根据商城上推出的活动,进行分析该活动是否有利于用户增长等等,最终用来反馈商城相应的调整活动信息。称之为OATP(联机分析)。
上图主要讲述了大数据的信息。通过上图我们可以将大数据大致划分为如下岗位:数据开发,数据平台开发,数据分析、算法应用。如果所处的公司再大一些,上面相对应
您可能关注的文档
- 大厦能耗管理系统的设计与应用.docx
- 大数据处理两套解决方案.docx
- 大数据量同步方案之全量同步改为增量同步解决方案.docx
- 大数据平台安全风险与建设.docx
- 大厦闸机连接访客系统的应用优势.docx
- 大数据背景下的智慧城市建设解决方案-智建社区.docx
- 大数据预处理架构和方法简介.docx
- 大数据预处理之数据清洗.docx
- 大数据运维-大数据平台+海量数据.docx
- 大数据运维的工作职责.docx
- 《设备控制处处在》教学课件-2026-2027学年华中科大版(新版)小学信息科技六年级全一册.pptx
- 部编语文二年级上册句子总复习.pptx
- 《通过反馈知效果》教学课件-2026-2027学年华中科大版(新版)小学信息科技六年级全一册.pptx
- 《我是小小控制员》教学课件-2026-2027学年华中科大版(新版)小学信息科技六年级全一册.pptx
- 《开关量的真与假》教学课件-2026-2027学年华中科大版(新版)小学信息科技六年级全一册.pptx
- 部编版语文三年级上《礼物》.pptx
- 退货跨班周期维护问题复盘与改进跟踪.docx
- 退货跨班任务分派与班前准备核对单.docx
- 退货跨班资料追溯与责任交接单.docx
- 退货逆向物流结果复核与验收确认记录表.docx
最近下载
- 中联ZT42J-Service-and-Maintenance-Manual-Portuguese维修手册含电器液压原理图.docx
- 2025湖南工商大学湘江实验室招聘研发人员12人笔试备考题库及答案解析.docx VIP
- 2025年初级消防装备维护员资格理论考试题库(含答案).docx
- 香港平安卡(平安咭)考试题目及详细答案.docx
- 12福特福克斯 电路图.pdf VIP
- 2025湖南工商大学湘江实验室招聘研发人员12人备考题库及答案解析.docx VIP
- 苜蓿青贮后RFV降低是一种误解.pdf VIP
- SY∕T 6928-2018 液化天然气接收站运行规程.pdf
- 人教版五年级上册数学用字母表示数练习题总汇.docx VIP
- 红岩概括每章字.doc VIP
原创力文档

文档评论(0)