京东联邦数字网关产品白皮书-京东.pdf

联邦数字网关

产品白皮书

V2.1

目录

第1章概述3

1.1背景3

1.2产品介绍4

第2章产品功能7

2.1连接7

2.2共享8

2.2.1元数据共享8

2.2.2模型能力共享9

2.3安全10

2.4监控10

第3章应用场景12

3.1个人信用评分12

3.2企业信用评分13

3.3精准风控14

3.4智能选址14

3.5精准营销15

3.6异常检测16

第4章产品特点17

第5章联邦算法介绍19

第6章关键技术22

6.1认证层22

6.2业务层22

6.3网络层23

6.4监控层24

第7章典型部署25

第8章产品资质26

8.1论文26

8.2专利26

第1章概述

1.1背景

随着技术的不断发展和大数据技术的普及，目前多数政府机关、

企事业单位都已拥有海量的数据，并利用自己拥有的数据进行相关的

数据挖掘、分析和建模。伴随着城市化建设的高速发展，跨机构跨行

业的合作越来越频繁，政府和企业面临的场景也越来越复杂，数据挖

掘的广度和深度也日益增高，因此机构之间的数据共享和数据融合的

需求也越来越强烈。

然而，现状是现有的各机构储存管理的数据往往只为该机构自己

所用，不同机构间的数据互不相通、互相孤立，渐渐的，城市中也就

形成了越来越多的“数据孤岛”。数据孤岛林立，数据共享难已成为

制约智能城市建设、企业发展的首要问题。如何打破数据孤岛，实现

信息融合，是企业发展和城市建设的当务之急。

数据孤岛形成的原因很多，最主要有以下三个方面：

数据安全难以保证

在数据共享中，如何保证部署过程、数据使用过程和数据传输过程

等各个环节的安全，在传统的数据共享方式中都难以实现。

利益保护

移动互联网、物联网、云计算等新一代信息技术的成熟与普及，产生

了海量数据，渗透在各行各业，蕴含着巨大的价值。而数据也早已成

为各政府机关、企事业单位重要的生产要素和战略资产。数据共享则

意味着自身利益的损害。

法律法规

2018年5月25日，欧盟颁布的旨在保护个人数据的《通用数据保

护条例》（GeneralDataProtectionRegulation，简称GDPR）在

欧盟成员国内正式生效实施。2019年5月28日，中国国家互联网

信息办公室发布了关于《数据安全管理办法（征求意见稿）》公开征

求意见的公告。国家针对利用网络开展数据使用等活动，以及数据

安全的保护和监督管理相关的法律法规将会越来越严格。

除此之外，数据类型多样、数据平台多样、数据标准不一致、多

种机密级别不一致、可输出和不可输出标准不一致等问题，也造成了

数据共享难，数据孤岛的形成。

1.2产品介绍

京东城市联邦数字网关针对数据孤岛林立、数据共享难等问题，

使用联邦学习算法、多方安全计算等先进技术，在传输安全、存储安

全、计算安全、硬件安全和部署安全五重安全防护机制下，能够做到

在不泄露数据隐私、自有数据不出门的前提下，完成跨域建模。支撑

不同机构间更加广泛的数据合作，并对模型、数据等服务进行联合运

营、科学分润，最终实现合作共赢。

联邦数字网关系统产品提供一站式跨域训练任务创建功能，主

要功能包括：

•数据接入：支持本地csv文件上传，以及MySQL数据库接入两种

方式。

•数据预处理：数字网关支持数据预处理功能，包括安全ID对齐

数据处理以及自定义函数设置功能。

•一站式训练任务创建：数字网关提供一站式跨域训练任务创建功

能，内置算法，通过简单的模型选择和参数配置，即可完成跨域

训练任务创建。

•模型验证：联邦数字网关支撑两种模型验证方式，包括

留出法：即按照一定比例随机划分数据样本，作为测试样本

交叉验证法：即将样本划分为K等份，每次留一份作为测

试，训练K个学习器，取测试结果的平均值

自定义验证法:选择其他数据样本作为验证数据集

模型评估和特征权重：联邦数字网关根据不同类型模型，提供

相应评估