淘宝分布式服务框架.docxVIP

淘宝分布式服务框架

Alibaba

玄宵technologyASsociation

玄宵

引子Alibaba

引子

technologyAssociation

·分布式服务框架基础数据

参数

值

每天调用量

300+亿

提供的服务数量

3k+

机器数量

8k+

机房分布

6,7个机房

应用

1000+

使用者

整个阿里系

大纲Alibaba

大纲

technologyAssociation

·淘宝分布式服务框架(HSF)演进过程·软负载体系

·服务治理

·分布式跟踪系统(Eagleeye)

AlibabatechnologyAssociationHSF演进过程

Alibaba

technologyAssociation

·初始版本

一服务发布，订阅以xml文件形式配置一Xml文件与应用分离

一通讯层基于JbossRemoting一负载通过硬件设备负载

Alibabatechnology

Alibaba

technologyAssociation

·使用起来非常复杂，部署维护成本高

·JbossRemoting量大，不稳定，而且不可控·硬件负载设备成本高，易出问题。

AlibabatechnologyAssociationHSF演进过程

Alibaba

technologyAssociation

·配置使用方式的改进

一使用示例

beanid=“helloWorld”class=“com.taobao.hsf.test.HelloWorldlmpl”/

AAlibabatechnologyAssociationHSF演进过程

A

Alibaba

technologyAssociation

·发布服务

beanclass=com.taobao.hsf.app.spring.u

beanclass=com.taobao.hsf.app.spring.util.HSFSpringProviderBean“propertyname=servicelnterface

valuecom.taobao.hsf.test.HelloWorld/value

/property

propertyname=target

refbean=“helloWorld”/

/property/bean

·

·消费服务

beanid=“hello”

class=com.taobao.hsf.app.spring.util.HSFSpringConsumerBean“propertyname=“interfaceName”

valuecom.taobao.hsf.test.HelloWorld/value/property

/bean

AlibabatechnologyAssociationHSF演进过程

Alibaba

technologyAssociation

·部署及隔离方式改进

一与应用分开部署，运行期依赖

一外部采用与应用独立的classloader隔离，内部采

用OSGI隔离·优点vs缺点?

AlibabatechnologyAssociationHSF演进过程

Alibaba

technologyAssociation

·网络通讯改进

-基于mina封装TB-Remoting

一分阶段序列化(java,hessian)一连接采用长连接

AlibabatechnologyAssociationHSF演进过程

Alibaba

technologyAssociation

·负载均衡改进

一采用基于配置中心(configserver)订阅推送

一客户端软负载

一容灾，失效恢复一路由等规则支持

AlibabatechnologyAssociationHSF演进过程

Alibaba

technologyAssociation

·Configserver

·

一面向动态数据推送·Diamond

一面向静态数据推送

HSF演进过程Alibaba

HSF演进过程

technologyAssociation

·跨语言改进

—Webservice

—Protocolbuffer—Hessian

AlibabatechnologyAssociation+A

Alibaba

technologyAssociation

+A

·演进过程中的一些小功能

一客户端线程池控制(稳定性开关)一日志放置的目录

一日志刷屏

一服务本机优先调用

一服务调用及执行统计(logstat)一服务端线程池隔离(防止雪崩)

-线程池满，自动执行jstack,jmap

一服务端及客户端配置交互(超时，序列化类型)

-Core+plugin模式

AAlibab