券商大数据平台基于容器云实现业务加速.docxVIP

?

?

券商大数据平台基于容器云实现业务加速

?

?

当前券商智能化和数字化的转型主要是通过券商自建金融科技业务系统或与金融科技企业开展战略合作，提升数字化服务能力，重塑经纪业务、投行业务、资产管理、自营业务等行业生态。如经纪业务由发展通道向理财业务和信用中介终端转变，在业务链条拓展、风险定价实施、资产证券化等方面开辟新的盈利模式，应用场景也从传统的智能投顾、智能客户向客户画像、交易轨迹、量化方案等方向拓展。这些业务创新应用都需要借助大数据技术。基于容器云支撑大数据平台，目前也受到很多券商的关注。近日，社区组织了交流活动，邀请来自券商的用户专家和上海天好、红帽的技术专家共同探讨“券商大数据平台如何基于容器云实现经济业务和投行业务等加速智能化和数字化？”，以助力券商更好的实践落地相关技术。活动中，参与专家与社区用户踊跃发表了自己的观点，并最终就券商大数据平台与容器云的结合达成了一致共识。本文对探讨内容进行了梳理总结，重点包括：容器技术的发展与容器云平台的规划、券商大数据平台与容器云平台的结合、基于容器云支撑大数据平台的部署等，希望能给同行在面对基于容器云的大数据平台建设时，提供一定的参考和帮助。

本次交流达成的共识总结

通过本场交流活动达成了一些交流共识如下，仅供参考：

（1）虚拟机更适合比较重或庞大的单体应用和场景，对操作系统资源要求多，使用虚拟机更为合适。而容器更适合轻量级的应用，迭代较多，如微服务，在服务器上运行更多的应用，适合在云环境快速迁移。

（2）容器云平台的部署要结合本单位的实际情况，小规模进行测试（传统架构与容器云并存），结合业务情况验证方案的可行性，按照先易后难，从外围到核心的原则建设容器云。

（3）天好大数据平台提供多源异构的数据处理、数据治理、数据资产管理、数据质量管理、数据分析平台、API管理平台、AI人工智能平台等功能，为政府、企业、科研机构等客户提供大数据管理、开发和计算的能力。

（4）容器云和大数据有着各自不同的适用场景，大数据技术主要用于处理规模性、多样性、高速性、价值性、以及真实性特征的数据，容器云提供了高效的资源管理能力。随着容器编排技术的日渐成熟，使两者架构融合，充分发挥各自优势，取长补短成为了可能。

一、容器技术的发展与容器云平台的规划

容器云平台作为基础设施平台，可以实现资源共享，实现了共享，就能适应快速的业务变化，容器轻量化PaaS平台可以利用容器技术的特点，其技术特点非常适合互联网化应用的快速迭代开发、弹性伸缩部署。

1、容器技术的发展是否能替代VMware等虚拟化呢？

@chaohui天好研究院院长：

容器上承应用，下接资源；资源有可能是物理机，也有可能是VM。总体来看，各自的定位不同，但具体项目建设选型时可以只选容器或者VM；但是个人认为，容器的应用场景会越来越不依赖于VMware。

@gdong红帽资深解决方案架构师：

最近一两年，以容器为代表的的云原生技术非常热门，越来越多的企业选择直接在物理机上部署容器平台，而跳过中间的虚拟化IaaS层，而且红帽的OpenShift也推出了虚拟化功能。即支持在容器里部署虚机，这也让大家逐渐有了这个疑问。

总体而言，从容器和虚拟机的使用场景来说，它们有着各自的应用场景，虽然会有一些重叠，两者区别还是比较明显的。比如，虚拟机更适合比较重或庞大的单体应用和场景，对操作系统资源要求多，使用虚拟机更为合适。而容器更适合轻量级的应用，迭代较多，如微服务，在服务器上运行更多的应用，适合在云环境快速迁移。

从底层硬件的管理角度来说，IaaS层是对硬件资源的池化管理，目前容器平台关注的还是对容器编排的支撑，对硬件层面的管控相对较弱，容器平台可以借助Iaas管理能力增加额外的功能，比如红帽OpenShift在支持物理机直接部署的情况下，也提供了对VMware、AWS、Azure、阿里云等私有云、公有云环境的部署，而且对于私有云IaaS和公有云IaaS，OpenShift平台还可以利用底层IaaS的资源调度能力，实现全自动安装、物理节点的动态伸缩管理等等，扩充Kubernetes的功能。

所以目前来看，只要企业还有IaaS的实际需求，容器和虚拟化应当会在相当长时间内共存，至于将来是否会替代，还要看企业的实际需求。

@李永剑?上海天好技术中心负责人：

有这个趋势，但目前不能完全替代Vmware。

2、Docker容器如何保障MySQL数据库高可用性呢？

@李永剑?上海天好技术中心负责人：

容器化应用都基于k8s或OpenShift管理，给一组MySQL打标签让它固定在不同的node节点即可实现。?

@liujian0122?工程师：

两个方面：

（1）Docker