大数据知识点.docVIP

大数据知识点

大数据技术基础

大数据技术基础涵盖大数据的基本概念、特点、应用场景以及相关技术体系。大数据通常指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

1.大数据定义与特征

-定义：大数据是指规模巨大、类型多样、增长快速的数据集合。

-特征：

-海量性（Volume）：数据规模巨大，通常达到TB级别甚至PB级别。

-高速性（Velocity）：数据产生和处理的速度非常快，需要实时或准实时的处理能力。

-多样性（Variety）：数据类型繁多，包括结构化数据、半结构化数据和非结构化数据。

-价值性（Value）：大数据中蕴含着巨大的商业价值和社会价值，但需要通过有效的分析方法进行挖掘。

-可扩展性（Scalability）：大数据系统需要具备良好的可扩展性，以应对数据量的持续增长。

2.大数据应用场景

-金融行业：风险控制、欺诈检测、客户画像等。

-医疗行业：疾病预测、医疗资源优化、个性化治疗等。

-零售行业：精准营销、供应链管理、客户行为分析等。

-交通行业：交通流量预测、智能交通管理、公共交通优化等。

-媒体行业：内容推荐、用户行为分析