曹静静《基于大数据的信贷审批系统》PPT.pptx

基于大数据的信贷审批系统曹宝caobao@;My Tags;Agenda;线上信贷业务 ;各阶段 进件，电销，电照，审批核，放款， 回款，催收…… 线上 ; 用户特点 海量的用户 丰富的场景 多样的接入(H5, SDK, APP, API) 数据特点 多样的获取方式 丰富的数据种类 复杂的数据格式 ;深度的数据挖掘 + 智能的信贷系统;信贷系统架构 ; ;人机混合 机器决定 Groovy vs Drools ;深蓝系统 ;审批系统 ;审批系统如何智能？ 数据挖掘;数据平台架构 ; 数据种类 社交类 网银类 电商类 市政类 数据格式 结构化化 半结构化 文本类 服务场景 申请 审批 催收 分析建模 ;来源：人工录入，打标，聚类或图计算生成，三方批量导入 使用：贷前申贷过滤，贷中审批关联性标记，离线模型训练 计算：贷前实时计算 500ms,贷中审批近实时计算 1min, 离线的黑名单生产 24hours 算法：K-Means,word2vec,Graph Centrality,Graph Shortest Path…… 规模：1千万申请用户 扩展：灰名单，敏感词……;Zeppelin from / ;MySQL Importer in Zeppelin ;统一 Schema;实时数据监控;Mesos Job 配置;数据科学家 80%时间准备数据，20%时间埋怨准备的数据质量 ;What if no 数据工程师？ What if no 算法工程师？ What if only 数据科学家？;在系统的帮助下 数据科学家 全栈化;Spark Pipeline ;随机森林 ;f(数据挖掘，信贷系统) = 智能的信贷系统;数据+系统 融合 ; 状态流 异步数据流 同步规则模型调用 状态的同步 check 机器-人-机器 数据初步加工 审批核专家打标 转化为规则或模型 ;状态管理 有状态的数据才更有价值 ;Data Hub = Rule Service ;可视化规则;专家打标