NET开源基础服务在互联网行业的应用.pptVIP

.NET 开源基础服务在互联网行业的应用 行业 O2O 电子商务 需求 构建具备高可用，高扩展性，高性能，能承载高并发，大流量的分布式 电子商务平台，支持用户，订单，采购，物流，配送，财务等多个项目 的协作，便于后续运营报表，分析，便于运维及监控。 架构演变 基础框架剥离 - 分库分表 - 基础服务建设 - 私有云建设 - 分布式操作系统 基础框架 整个公司无论有多少项目，都需要沉淀最基础的框架，里面一般包含核 心的分库分表规则，统一的数据库操作类库，统一的通讯类，统一的日 志类，统一的加密算法，统一的基础服务 sdk ，公用的一些工具类等等。 该框架用于定义最基础的公司架构，设计，统一最基础的技术及项目架 构规范，拦截及监控最基础的核心调用等。框架命名一般比较简单，如 京东，可以定义为 jdf ；淘宝，可以定义为 tbf 。 分库分表 分库分表为最常规的架构拆分方案。一般会从业务角度进行不同视角的 拆分，如用户视角和商户视角。当然前提也需要业务方面或者其他技术 力量的支持，不出现或者解决拆分后跨多个分库或者分表的表查询及查 询结果合并问题。分库分表前也通过需要预估容量，预估性能。分库分 表也经常会遇到全局 id ，或者分布式 id 自增且唯一的问题，这些都要预 先在设计和架构层面要充分考虑。 用户视角拆分如图所示 商户视角拆分如图所示 基础服务 基础服务是系统分布式的一个核心，它往往与操作系统基础组件相对应 , 只不过它是分布式的。如基础服务一般包含分布式存储，分布式缓存， 分布式计算，分布式消息，分布式服务，分布式任务调度，分布式监控 等。对应于操作系统的磁盘，内存， cpu ，跨进程消息，进程，计划任务， 系统监控等。 业务包含的基础服务一般包含几块 : 分布式缓存 , 业务消息队列，任务调 度，监控平台，服务中心，分布式锁服务，配置中心。 基础服务如图所示 分布式任务调度平台 场景： 主要是解决业务的后端后台任务挂载，隔离，定时调度，任务出错 报警等，如订单异步同步，消息异步发送，定时统计报表，发送优惠券等 等。 功能： 用于 .net dll, exe 的任务的挂载，任务的隔离，调度执行，访问权限 控制，监控，管理，日志，错误预警，性能分析等。 1) 平台基于 进行任务调度功能开发，采用 C# 代码编写 , 支持 corn 表 达式和第三方自定义的 corn 表达式扩展。 2) 架构以插件形式开发，具有良好的功能扩展性，稳定性，简单性，便于 第三方开发人员进一步进行功能扩展。 3) 支持多节点集群，便于集群服务器的资源有效分配，任务的相互隔离。 4) 支持邮件形式的错误预警，便于运维及时处理任务异常等。 开源： /chejiangyi/Dyd.BaseService.TaskManager 分布式配置中心平台 场景： 1. 业务涉及 App ，后台，采购，物流，配送，财务，仓库等具有多个项目 的配置公用。 2. 业务服务高并发下面的服务降级控制。 功能： 用于所有项目统一的配置集中管理，简化运维和项目部署 , 具备高灵 活性，高性能，高稳定性，高及时性。同时具备配置项的负载均衡和故障 转移 , 从而实现项目的软性的负载均衡和故障转移能力。 开源： /chejiangyi/Dyd.BaseService.ConfigManager 分布式消息队列平台 场景： 1. 异步订单的同步，推送消息异步发送，优惠券异步发送，异步日志记 录，异步异常订单预警监控等。 功能： 分布式业务消息队列是应用于业务的解耦和分离，应具备分布式， 高可靠性，高性能，高实时性，高稳定性，高扩展性等特性。 1 ）大量的业务消息堆积能力 2 ）无单点故障及故障监控，异常提醒 3 ）生产者端负载均衡，故障转移，故障自动恢复，并行消息插入。 4 ）消费者端负载均衡，故障保持，故障自动恢复，并行消息消费。 5 ）消息高可靠性持久化，较高性能，较高实时性，高稳定性，高扩展性。 6 ）支持 99*99 个消息分区，单个消息分区单天支持近 1 亿的消息存储。 7 ）消费者拉方式获取消息，在高并发，大量消息涌入的情况下，只要消费 能力足够，不会有消息延迟，消息越多性能越好。 开源： /chejiangyi/Dyd.BusinessMQ 分布式缓存中间件 场景： 1. App 首页，列表页，详情页在（抢购业务）高并发情况下的缓存。 功能： 方便实现缓存的分布式，集群，负载均衡，故障自动转移，并兼容 多种缓存存储的分布式缓存中间件。 用于解决分布式架构中的分布式缓存 环节。 1) 代码少，便于扩展。 2) 兼容阿里云 memcache ， redis ， ssdb 。 3) 规范缓存使用接口，屏蔽底层缓存实现。 4) 通过配置连接字符串