基于大数据的http端到端关联方法研究.doc

成果上报申请书
成果名称
基于大数据的ｈｔtp端到端关联方法研究
成果申报单位
***通信集团湖北有限公司 　　 　 　　 　
成果承担部门/分公司
***通信集团湖北有限公司网管中心
项目负责人姓名
项目负责人联系电话和Eｍaｉl
成果完***
完***数量不超过10个
成果一级领域
IT
成果二级领域
IＴ应用
成果三级领域
大数据应用
成果专业类别*
所属专业部门＊
成果研究类别*
省内评审结果＊
关键词索引(３~５个)
应用投资
0万元（指别的省引入应用大致需要的投资金额)
产品版权归属单位
　 　 ***通信集团湖北有限公司
对企业现有标准规范的符合度:(按填写说明5）
１、***统一DPI设备技术规范；
２、***集中性能管理平台建设规范;
成果来源:如果该成果来源于集团研发计划内项目,请填写研发项目年度、项目名称及类型;否则填写“计划外项目”(按填写说明6）
计划外项目
专利情况：如果该成果产出相关专利,且专利处于国知局专利申请审查阶段或已授权，请说明专利名称、类型、申请号、状态、是否海外申请等情况。（按填写说明7)
未申请专利
成果简介:
随着网络带宽的增长与服务器性能的提高，http服务越来越侧重,ＷＥB页面越来越花哨。如新浪首页中包含40个站点和超３0０个请求。而无线网络空口资源是有限的,
需要考虑如何在有限的资源下提高Hｔtｐ协议传输效率,以及Ｈｔｔp用户的上网体验。通过大数据平台发现，htｔp不同版本对Http时延有很大的影响。
在移动互联网环境,时延过大,丢包不再是网络发生拥塞的必要条件,无线网络由于切换、信号衰落、强干扰等引发的突发丢包和时延抖动都会引出网络拥塞,都会被ＴＣP误判,所以引入Htｔｐ的端到端分析，与用户的ＭR信息进行关联,能够有效的避免这种误差,更为精确的定位这种无线环境问题引起的ｈtｔp问题。
该篇主要通过研究Hｔtp业务的端到端关联方法,利用机器学****合成基于HTTP端到端分析的SDR数据，为分析HTＴP端到端业务提供数据基础。
省内试运行效果：
本方案结合了大数据平台的数据，进行Hｔｔｐ用户的深度挖掘,节省了路测优化所带来的人力与物力开销，同时也避免数据单一对整体指标的准备性的影响,可以更加准确的发现问题,定位问题，解决问题,可以更好的提升问题处理效率,更好的提升高速专网的运行能力与用户满意度。
本方案针对挖掘出来的真实Hｔtp用户,结合现有大数据平台的数据、用户MR数据深度关联,实现相应的专题分析功能,完成Ｈtｔp业务各种网络问题原因分析，实现整个Ｈｔtp过程由用户到服务器的端到端分析。
文章主体(3００0字以上，可附在表格后）:根据成果研究类别,主体内容的要求有差异，具体要求见表格后的“填写说明8”。
具体内容见表格后的附件。
一、背景说明
随着网络带宽以及服务性的提高,目前由IＰ网络承载的各种业务已经成为移动网络的命脉，业务性能的好坏直接影响到客户感知,业务开展以及商业市场。目前语音方面有基于IMＳ分组域的VOLTE，数据方面主要是基于Htｔｐ协议的各类服务，优化Http业务质量,已经显得尤为重要了。目前Hｔtp问题的定位相互推诿的现象非常普通,一种能够精确分析定位,并且互相认可的分析方法已经迫在眉睫。
HTTＰ协议（HyperTexｔ Ｔｒansｆer　Prｏtｏcｏl,超文本传输协议）是用于从ＷWＷ服务器传输超文本到本地浏览器的传送协议。它可以使浏览器更加高效,使网络传输减少。它不仅保证计算机正确快速地传输超文本文档,还确定传输文档中的哪一部分，以及哪部分内容首先显示（如文本先于图形）等。ＨTTＰ是基于ＴＣＰ协议之上的。在
TＣＰ/IP协议参考模型的各层对应的协议如下图，其中ＨTTＰ是应用层的协议。
图1．1 HTTＰ在ＴCP/IＰ协议中所在协议层
因此,研究Http的端到端分析,有助于提高ＨTTP业务的定位能力手段，将其转换成系统性规则或提取成知识。本案例,将研究与用户面与控制面数据关系，以供后续ＨＴTＰ分析平台的搭建,发生时得以有效且快速解决,并建立数据分析系统　，当发生ＨTＴP业务故障时,系统可自动产生处理建议,提醒工程师注意,及时跟进处理。
二、HTTＰ端到端关联方案
方案创新点
目前现网中对ＨＴＴP业务的优化主要是分段式的优化手段,分为无线侧、核心网侧、业务网侧,目前优化手段主要是无线侧，对核心网、业务网优化的手段较少。传统的优化分析手段,也容易造成各个分析环境的脱节,单个问题的分析周期加长,导致问题的整个生命周期过长,最后不了了之的情况居多,造成很大程度上的用户感知差情况。比如