04.华为云交易系统业务可观测实践-肖福剑.pdfVIP

华为云交易系统业务可观测实践

肖福剑/华为云高级工程师

个人简介

•16年加入华为，专注于交易系统可观测平台构建

•华为云数据流平台团队负责人

•崇尚技术，坚信技术是第一生产力

目录

•交易系统业务监控遇到的挑战

•鲁班APM

•全球鹰

•数据流平台

•总结和展望

华为云交易系统监控发展历程

华为云交易系统监控体系

交易系统监控体系遇到的挑战

•微服务1天内FullGc

10次以上，如何快速定位？

•前端JS报错如何自动监控发现？

•北向或者南向接口调用失败，如何快速监控发现？

•用户报障下单失败，如何快速定界哪个微服务的问题？

•接口调用慢，如何获取快速获取线上各接口性能表现？

•用户的账本余额变更出现了跳变，如何快速监控发现？

•云服务产品经理调价失误，导致单价超过1W倍，如何在新价格生效前快速监控发现？

•某个云服务某个规格在北京四上报的用量这两天骤减，如何快速监控发现？

•某个云服务删除资源接口变更定义变更，导致用户的资源被误删除，如何快速监控发现？

•微服务日志定时清理机制失效导致磁盘空间满，最终导致业务进程服务启动，如何快速定位出是因为磁盘满的原因？

•昨晚A微服务补丁升级后导致渠道用户开票失败，如