爱奇艺大数据面试题及详细答案.docxVIP

爱奇艺大数据面试题及详细答案

一、基础必考题（入门级，必考）

1.请说说大数据的5V特性，结合爱奇艺的业务场景举例说明

问题解析：考察大数据基础概念，核心是结合爱奇艺视频业务，避免纯理论，体现对业务的理解。

详细答案：大数据的5V分别是Volume（容量）、Velocity（速度）、Variety（多样性）、Veracity（真实性）、Value（价值），结合爱奇艺场景具体说明：

1.Volume（容量）：爱奇艺每日产生海量数据，包括用户播放日志、视频上传文件、评论互动、会员交易记录等，单日数据量可达PB级，比如单部热门剧上线当天，仅播放日志就会产生数千万条记录，这也是爱奇艺需要依赖分布式存储（如HDFS）的核心原因。

2.Velocity（速度）：用户实时操作会产生高频数据流，比如用户切换视频、暂停播放、点赞评论，这些行为需要实时采集、处理，用于实时推荐和用户行为监控，比如用户刚看完一部悬疑剧，系统需要立即推送同类型剧集，这就要求数据处理延迟控制在秒级或分钟级。

3.Variety（多样性）：数据类型复杂，既有结构化数据（如用户ID、会员等级、播放时长、付费金额），也有半结构化数据（如视频标签、评论内容），还有非结构化数据（如视频画面、用户头像、弹幕内容），需要不同的处理工具适配，比如用Hive处理结构化日志，用Spark处理半结构化的评论数据。

4.Vera