统一日志平台架构设计与实现方案.pptx

统一日志平台架构设计与实现

最新版本总体架构设计

01.系统背景介绍

02.架构版本迭代介绍

03.整体架构介绍

04.各个子系统简介

目录

01

PARTONE

系统背景介绍

01.系统背景介绍

统一日志平台诞生记

互联网企业高速发展，企业内部诞生了成千上万的应用系统，而且每一个系统又有多个子系统，每一个子系统又会部署多个实例和多台机器

数据查看需求

分散在不同服务器的日志怎么查看方便，关键字搜索，关键报警

数据分析统计需求

想看一下业务怎么样

用户量多少

哪些功能经常被使用

02

PARTTWO

架构版本迭代介绍

02.架构版本迭代介绍

1.0版本

python客户端

集中存储

登录堡垒机查看日志

01

2.0版本

Java重写客户端

数据转发中心

数据聚合中心

Hadoop集群数据统计分析

管理中心

02

3.0版本

负载均衡

整个系统更加智能化，让系统有极强的容错和恢复能力

03

03

PARTTHREE

整体架构介绍

03.整体架构介绍

04

PARTFOUR

各个子系统简介

04.各个子系统简介

数据收集器

日志采集客服端，会在每台机器上部署一个

统一服务

对整个统一日志平台其他子系统提供zk，数据库访问等统一的封装服务

数据转发器

基于数据类型订阅规则来进行数据转发到指定的数据接收器或者集群

管理中心

提供web可视化的界面来进行各种订阅

聚合中心

提供对各种