(共27页PPT)三有保险行业用户画像架构.pptxVIP

  • 0
  • 0
  • 约1.17千字
  • 约 27页
  • 2026-11-18 发布于广东
  • 举报

(共27页PPT)三有保险行业用户画像架构.pptx

三有保险用户画像平台三有行业级用户画像解决方案

项目介绍三有用户画像解决方案,以保险行业为依托,可拓展到各行业讲授以基于保险平台构建的用户画像,采用了目前流行的大数据技术的实时+离线Lambda架构解决方案。

第一章节:架构

项目架构业务流程图数据流向数据处理流程用户标签计算(用户性别)

企业级大数据平台三大主体业务

企业级大数据平台三大主体业务

Lambda架构

标签层级

用户画像经典Lambda架构

项目架构图

项目功能架构图

项目功能架构要点通过Hive构建ES的外部表加载全量和增量数据。基于数据内容确定业务场景并使用SparkSQL和MLlib建模建立标签及其规则模型确定标签更新成Oozie的定时工作流执行YARN执行作业完成后写入画像结果数据到ES和Solr通过RestAPI查询ES并实时生成用户画像结果展示

技术选型数据迁移工具Sqoop分布式存储和计算平台HadoopSQLonHadoop方案SparkSQL实时计算StructuredStreaming分布式存储和分布式索引ElasticSearch工作流调度引擎Oozie机器学习库SparkMLlib(后期挖掘类标签)

项目功能架构要点功能模块:系统由7个模块组成,主要为基础标签、组合标签、微观画像、标签查询、标签任务、审核管理和系统设置。

项目功能架构要点功能模块:系统由7个模块组成,主要为基础标签、组合

文档评论(0)

1亿VIP精品文档

相关文档