大数据平台万并发改造方案.docVIP

大数据台1万并XX造方案草稿

改造示例图

服务器配置表

服务器应用名称

服务器类型

数量

CPU

内存

存储盘（G)

系统盘空间（G)

操作系统

Linux的交换分xx（SWAP）

Nginx均衡服务器

虚拟机

1

8

16

500

200

CentOS7.3

8G

Redis缓存服务器

虚拟机

6

8

16

500

200

CentOS7.3

16G

应用服务器

虚拟机

15

8

16

500

200

CentOS7.3

8G

数据XXxx息服务器（分XXxx息）

物理机

4

32

64

2000

200

CentOS7.3

8G

数据XXxx息服务器（主XXxx息）

物理机

1

64

128

3000

200

CentOS7.3

16G

nginx服务器使用8核16进程时，可设置工作进程15个，最大支持15000+并发，一台已足够；

Redis服务器作集群需要3个节点，每个节点为达到高可用需要主从，共需6个服务器；

应用服务器内部使用tomcat作为web服务支撑（tomcat配置：内存2-4G，最大请求数800，等待请求队列200），在并发测试XX，一个tomcat建议并发量在800左右，所以为支撑1万并发，需要15台服务器；

数据XXxx息服务器需要作集群支撑，分为1个主节点4个从节点，共5台服务器；

由于需要进行相关的并发测试，需要在测试时提供一摸一样的服务器配置，即测试一套，正式一套；

改造需调整方面及耗时

调整部分

描述

耗时（人天）

单点登录部分

整个登录功能在集群下需将会话管理全部迁移至缓存XX，原功能不再保留会话

12

缓存应用部分

原有使用缓存部分使用的是单机模式技术，需切换至新的缓存框架XX，由于原功能使用地方较少，需要一一找到并调整

5

数据XXxx息集群化

A方案使用mycatXX间件作集群化，B方案使用官方的pgpool作集群化，

由于此处调整比较重要，而不确定方案能否适配，需做两手准备，同时现有数据有部分需要人为迁移

25

测试环境下测试

主要做并发测试，并根据测试结果作出调整

10

正式部署及替换

正式部署及地址切换，关闭旧服务

5