财务大数据分析项目1-7教材配套教学课件汇总.pptx

财务大数据分析237页完整版课件 内容可修改PPT目录项目三 数据预处理项目二数据获取项目一 大数据基础项目四 大数据+财报数据分析项目五 大数据+资金分析项目六大数据+销售分析项目七大数据+费用分析任务1 大数据基础认知任务2 数据库基础认知项目一大数据基础什么是大数据/video/BV17P4y157Ke/video/BV17P4y157Ke任务1 大数据基础知识一、数据与大数据在目前高速发展的时代，科技发达、信息流通，大数据就是这个时代的产物。所谓数据，就是用来描述事物的符号或代码。在计算机系统中，各种数字、文字、字母、符号、图形、图像、音频等都被统称为数据，而数据通过一定的手段加工就得到了我们平时所说的信息。01 在现实生活中，数据无处不在，例如，学生的学号、成绩、身份证号、快递单号等都包含了大量的数据。将数据整理成信息，可以分析出行、销售、生产等方向，从而达到最优组合。以天气为例，通过风速、湿度、云层的移动轨迹等数据进行分析，最终可以获得区域天气的相关信息，同时也可以较为精准地预测未来一定时间内的天气情况，这就是大数据时代最初的展现。所以，人们是通过数据来得到信息，从而认识世界的。 大数据（big data或 mega data），或称为巨量资料，指的是需要新处理模式才能具有更强的决策力、洞察力和流程优化能力的海量、高增长率和多样化的信息资产，是大的数据量与现代信息技术环境相结合涌现的结果。换而言之，它是一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合。 大数据通常是以多元的形式从许多来源搜集庞大数据组，往往具有多样性。比如，在零售企业销售的数据库中，数据来源可能来自社交网络、电子商务网站、顾客来访记录等。例如，天气的相关数据，要具有时效性，也就是及时性。除此之外，对于数据来说，最重要的一个特性就是准确性。（一）大数据的起源（一）大数据的起源 大数据源于互联网的发展。互联网运行产生了海量的信息数据，互联网的快速发展创造了大数据应用的规模化环境，互联网企业也开发了处理软件，相对应地，大数据计算技术完美地解决了海量数据的收集、存储、计算和分析的问题。（一）大数据的起源 大数据以多元形式产生。数据并非单纯地指人们在互联网中发布的信息。比如，全世界的工业设备、汽车、电表上有着无数的数码传感器，随时测量和传递着有关位置、运动、震动、湿度、温度乃至空气中化学物质的变化，同时也产生了海量的数据信息。 简单来说，当数据累积到一定数量时，通过数学模型进行建模分析，就是大数据分析的雏形。例如，在数学中，我们学到的方程就是线性回归模型的基础表现。以学生的学习成绩来说，假设影响成绩的因素有且只有学习的时长，那么可以将学习时长设为自变量X，成绩设为因变量Y。这样我们可以通过长期收集的数据推算出自变量的系数，得到一个线性方程，如图1-1所示。 如图中所展示的公式，代入不同的学习时长，就可以得到一个对应的学习成绩。通过这个简单的模型，我们可以知道，如果希望考试及格，需要分配多少时间来学习；如果希望成绩优秀（80分以上），需要多少时间来学习。大数据时代，让我们可以更加合理地分配资源，获得更优的结果，最终推动了时代的发展。所以，未来将不再是IT时代，而是DT（Data Technology）的时代，也就是数据科技所带来的新的发展。（二）大数据的分类数据根据其内容不同，一般分为： 结构化数据、非结构化数据和半结构化数据三类。1.结构化数据 能够用数据或统一的结构加以表示的信息，称为结构化数据，如数字、符号等。传统的关系数据模型——行数据，存储于数据库，可用二维表结构表示，如图1-2所示。简单来说，结构化数据就是数据库，如企业ERP、财务系统等。03图1-2 结构化数据042.非结构化数据 非结构化数据与结构化数据比对如图1-3所示。非结构化数据是指其字段长度可变，并且每个字段的记录又可以由可重复或不可重复的子字段构成的数据库，用它不仅可以处理结构化数据（如数字、符号等信息），而且更适合处理非结构化数据（如全文文本、图像、声音、网页、影视、超媒体等信息）。 图1-3 非结构化数据与结构化数据比对图3.半结构化数据 半结构化数据举例如图1-4所示。半结构化数据相对复杂，是介于完全结构化数据（如关系型数据库）和完全无结构的数据(如声音、图像文件等)之间的数据，XML、HTML文档就属于半结构化数据。它一般是自描述的，数据的结构和内容混在一起，没有明显的区分。 图1-4 半结构化数据举例大数据的核心价值是预测，即在对海量数据进行存储和分析，运用数学算法预测事情发生的可能性。大数据已经渗透到了每一个行业和业务职能领域，逐渐成为重要的生产因素，而人们对于海量数据的运用将预示着新一波生产率增长和消费者盈余浪潮的到来。大数据