基于大数据的http端到端关联方法研究.docVIP

PAGE 成果上报申请书 成果名称 基于大数据的http端到端关联方法研究 成果申报单位 中国移动通信集团湖北有限公司 成果承担部门/分公司 中国移动通信集团湖北有限公司网管中心 项目负责人姓名 项目负责人联系电话和Email 成果完成人 完成人数量不超过10个 成果一级领域 IT 成果二级领域 IT应用 成果三级领域 大数据应用 成果专业类别* 所属专业部门* 成果研究类别* 省内评审结果* 关键词索引（3～5个） 应用投资 0万元（指别的省引入应用大致需要的投资金额） 产品版权归属单位 中国移动通信集团湖北有限公司 对企业现有标准规范的符合度：（按填写说明5） 1、中国移动统一DPI设备技术规范； 2、中国移动集中性能管理平台建设规范； 成果来源：如果该成果来源于集团研发计划内项目，请填写研发项目年度、项目名称及类型；否则填写“计划外项目”（按填写说明6） 计划外项目 专利情况：如果该成果产出相关专利，且专利处于国知局专利申请审查阶段或已授权，请说明专利名称、类型、申请号、状态、是否海外申请等情况。（按填写说明7） 未申请专利 成果简介： 随着网络带宽的增长与服务器性能的提高，http服务越来越侧重，WEB页面越来越花哨。如新浪首页中包含40个站点和超300个请求。而无线网络空口资源是有限的，需要考虑如何在有限的资源下提高Http协议传输效率，以及Http用户的上网体验。通过大数据平台发现,http不同版本对Http时延有很大的影响。 在移动互联网环境，时延过大，丢包不再是网络发生拥塞的必要条件，无线网络由于切换、信号衰落、强干扰等引发的突发丢包和时延抖动都会引出网络拥塞，都会被TCP误判，所以引入Http的端到端分析，与用户的MR信息进行关联，能够有效的避免这种误差，更为精确的定位这种无线环境问题引起的http问题。 该篇主要通过研究Http业务的端到端关联方法，利用机器学习，合成基于HTTP端到端分析的SDR数据，为分析HTTP端到端业务提供数据基础。 省内试运行效果： 本方案结合了大数据平台的数据，进行Http用户的深度挖掘，节省了路测优化所带来的人力与物力开销，同时也避免数据单一对整体指标的准备性的影响，可以更加准确的发现问题，定位问题，解决问题，可以更好的提升问题处理效率，更好的提升高速专网的运行能力与用户满意度。 本方案针对挖掘出来的真实Http用户，结合现有大数据平台的数据、用户MR数据深度关联，实现相应的专题分析功能，完成Http业务各种网络问题原因分析，实现整个Http过程由用户到服务器的端到端分析。 文章主体（3000字以上，可附在表格后）：根据成果研究类别，主体内容的要求有差异，具体要求见表格后的“填写说明8”。 具体内容见表格后的附件。 一、背景说明 随着网络带宽以及服务性的提高，目前由IP网络承载的各种业务已经成为移动网络的命脉，业务性能的好坏直接影响到客户感知，业务开展以及商业市场。目前语音方面有基于IMS分组域的VOLTE，数据方面主要是基于Http协议的各类服务，优化Http业务质量，已经显得尤为重要了。目前Http问题的定位相互推诿的现象非常普通，一种能够精确分析定位，并且互相认可的分析方法已经迫在眉睫。 HTTP协议（HyperText Transfer Protocol，超文本传输协议）是用于从WWW服务器传输超文本到本地浏览器的传送协议。它可以使浏览器更加高效，使网络传输减少。它不仅保证计算机正确快速地传输超文本文档，还确定传输文档中的哪一部分，以及哪部分内容首先显示(如文本先于图形)等。HTTP是基于TCP协议之上的。在 TCP/IP协议参考模型的各层对应的协议如下图,其中HTTP是应用层的协议。 图1.1 HTTP在TCP/IP协议中所在协议层 因此，研究Http的端到端分析，有助于提高HTTP业务的定位能力手段，将其转换成系统性规则或提取成知识。本案例，将研究与用户面与控制面数据关系，以供后续HTTP分析平台的搭建，发生时得以有效且快速解决，并建立数据分析系统 ，当发生HTTP业务故障时，系统可自动产生处理建议，提醒工程师注意，及时跟进处理。 二、HTTP端到端关联方案 方案创新点 目前现网中对HTTP业务的优化主要是分段式的优化手段，分为无线侧、核心网侧、业务网侧，目前优化手段主要是无线侧，对核心网、业务网优化的手段较少。传统的优化分析手段，也容易造成各个分析环境的脱节，单个问题的分析周期加长，导致问题的整个生命周期过长，最后不了了之的情况居多,造成很大程度上的用户感知差情况。比如：客户投诉微博刷新慢，王者荣耀游戏卡顿的情况等，这种情况下很多时候链路是正常的，但是就是无法确认问题原因，这个问题目前普遍存在。如下图2