互联网金融 刘江-携程大数据风控实践携程-下载版.pptx

腴源呈携程基于大数据分析的实时风控体系 介绍携程刘江ontents我们的挑战Aegis系统架构核心模块介绍o风控模型和策略风险管理是一种文化0Part■携程文化：让旅游变得更幸福■风险管理文化：11 Make the Travel More Freely and Securely”I我们的挑战1Part■业务类型和数据量增长■需要更加自动化和智能化■用好设备和行为数据■跨海外网络的数据延迟Aegis版本演进历史2Part2011 年 自建风控系统 .Net+SqIServer2015 年Java版上线 实时流量服务上线 吞吐量增加10x 效率提升10x 全业务切入2016 年Aegis系统上线分布式并行计算 实时处理用户行为数据交易关明非查2017 年设备指纹 同步执行复杂模型 新的规则引擎 新的变量引擎XMANI Aegis运行框架2PartON LIME儀上｝OFFLINE 窿下｝-Statistic Modeling统计建 模二 Logistic Regression 逻狷司3 -加chine Learning机器学 习:RandoE Fo「est随机森林-Deep Learning^度学习: CNN卷积神曇网够-Feature Engineering特征工程HB.ASEHADOOPMODELING .....................料学建模BIG DATA 海里数据分布存諸SPARK STREAMING 模型实时并行计算RULE ENGINEELASTIC SEARCH 实时索引规则引擎Aegis系统架构图2Part用户行为? MQ/KafkaRT: Counter / fpNRT: UserProfile / GraphBATCH: T+1D/1H VARIABLESZEUS/MRMONITOR: rules / models / eventsOFFLINE■■案件库faflData ServiceCache (5TB)DBHBaseI Aegis数据采集框架2Part数据贴源层；；数据采集层］;数据计算层数据使用层业务数据仓库风控引擎审核中心案件中心外部客户数据合作伙伴数据［实时数据计算平台实时数据流规则引擎决策模型ETL离线数据集市变量工场基础数据采集运营平台元数据中心数据产品外部数据采集社交数据外部账户数据数据健康度管理数据质量/数据监控/数据建模/数据优化/数据调度Aegis一笔支付请求的背后曰■黑白名单■数据预处理/变量衍生~ 1000-2000个■执行规则~ 400条+■执行模型-5-10个■结果计算及后处理Aegis性能和稳定性■日亿级交易处理能力■支付风控平均处理时长小于150ms , 99.9%线600ms.支持DR灾备，数据分级存储，7x24H监控预警■通用性强：?支持支付风控、业务风控、外部合作伙伴风控支持Aegis规则引擎■ ■■■■ ■■■却一 *?■■e二.■■■■Rule Engine规则分布式并行执行支持按业务分组机票支持动态调整分组和 扩容营销活动基于Java,咼吞吐量、 低延迟使用gRPC互联Aegis模型执行引擎PythonJPMML自主研发特点标准、开源， 兼容性好标准、开源， 兼容性好。使用Java解析并执行.dot模型文件， 支持随即森林和逻辑回归算法，算 法可扩展性能10-100ms,因需要独立部署，有网络 开销性能和Python执行.dot接 近，只是可以嵌入式运 行，所貝稳定性比Python 高0-10ms,嵌入式执行，性能高，稳定性高特性：■使用Java完全自主实现的dot模型执行器，执行耗时只有Python版本的10%■拥有完善的模型运行监控和熔断机制Aegis审核自动提示处理提示全部隐莓负面因素:1.证件号可能的国籍：尼日利亚I哈萨克斯坦I马来西亚I韩国I索马里I中国香港I墨西哥I 土耳其I南非I荷兰I,2.3. 电话亩^=0.133,注：［cutoffv=0.05］:4. 机票模型分值=［BOTTOM 1。％］0.2655,注：［cutoff:〈0.5］处理提示全部隐蕎正面因素：1.机票航段3洋程机票类型2.登机人包含持卡人姓氏或者全名负面因素:1.证件号可能的国籍:摩尔多瓦|越南|蒙古|肯尼亚|波斯尼亚佬挝|瑞士 |贝宁|印度尼西亚|黑塞哥维那|奥地利| 阿富汗I斯里兰卡I,2.3. 电话审核^注：［cutoff=0.05］：4. ^1^^^0=0.3374,注：［cutoff: 0.5］5. 行程涉及髙危国家［阿联酉］Aegis实时流量服务日查询量超100亿次配置服务O推送接口查询接口支持分钟、小时、日、月等 多级精度，支持动态配置支持3个月以上的超大时间 窗口流量数据实时推送，1秒级 延迟适用于限额限次、Velocity 变量和Ratio变量的实