学位论文 > 优秀研究生学位论文题录展示

基于Hadoop的CDMA分组域海量数据处理模型的研究

作　者: 李玉华
导　师: 叶猛
学　校: 武汉邮电科学研究院
专　业: 通信与信息系统
关键词: 网络优化海量数据 MapReduce HBase
分类号: TN929.5
类　型: 硕士论文
年　份: 2013年
下　载: 64次
引　用: 0次
阅　读: 论文下载

内容摘要

随着移动通信技术的快速发展和通信市场竞争的逐渐加剧，运营商不仅需要提供高质量的通信网络，而且需要充分掌握用户的行为喜好，根据客户需求量身提供个性化服务，制定有针对性的营销策略，因此，对网络信令和用户业务数据的分析挖掘成为网络优化的必要手段。然而，移动互联网应用类型层出不穷，访问人数的指数增加，导致了数据流量越来越大，特别是用户业务数据量迅猛增长，有效地存储并分析用户海量数据成为难点。为了摆脱如今数据丰富信息贫乏的局面，基于云计算的分组域数据处理系统提供了完善的解决方案。分组域数据处理，即对现有网络以旁路接入的方式进行数据采集，并根据相关协议解析数据得到有效数据集，通过对数据集的处理挖掘，分析网络状况和业务模型：（1）通过实时统计网络指标，了解网络运行状况；（2）故障的统计分析，有助于对网络故障进行定位、排查和预警；（3）业务分析，有利于了解业务的开展情况，对业务进行优化，推广；（4）对用户的画像，为运营商了解客户喜好，有针对性地推送业务提供依据，并且可以更好地保障对大客户的服务。本论文分析了移动通信的发展现状和数据业务日益丰富的趋势，阐明了运营商进行网络信令和业务优化的过程中对海量数据进行存储和分析挖掘的必要性及存在的难点；随后在研究新兴云计算技术的基础上，提出了基于分布式数据库HBase和MapReduce并行编程框架的分组域网络海量数据存储和分析模型；通过对模型的详细设计及实现，表明了此方案可协助运营商了解网络状况，排查定位网络故障，详细分析业务质量及运营情况，并方便运营商对用户进行画像，有针对性的推送业务和提供个性化的服务；本文提出的分组域海量数据存储和分析模型可满足当前甚至更大网络数据量的需求。

全文目录

摘要  3-4
Abstract  4-8
第1章绪论  8-12
  1.1 移动通信的发展现状及趋势  8
  1.2 数据处理模型的研究背景  8-10
  1.3 主要工作内容及论文结构  10-12
第2章 CDMA 网络结构研究及系统设计  12-28
  2.1 CDMA2000 分组网络研究  12-19
    2.1.1 网络逻辑实体  13-16
    2.1.2 分组域业务功能  16
    2.1.3 接口及协议分析  16-19
  2.2 数据处理模型架构设计  19-22
    2.2.1 数据接入方式  19-20
    2.2.2 数据处理架构设计  20-22
  2.3 系统模块功能设计  22-28
    2.3.1 负载均衡模块  22-24
    2.3.2 采集模块  24
    2.3.3 预处理模块  24-25
    2.3.4 数据存储与分析模块  25-27
    2.3.5 呈现模块  27-28
第3章 RP 接口数据采集方法  28-51
  3.1 A11/A10 协议分析  28-34
  3.2 RP 接口数据解析  34-51
    3.2.1 数据处理流程  34-42
    3.2.2 子模块间接口设计  42-49
    3.2.3 关键技术  49-51
第4章数据存储分析模块  51-69
  4.1 云计算技术研究  51-56
    4.1.1 HDFS 架构  52-53
    4.1.2 MapReduce 编程思想  53-54
    4.1.3 分布式 HBase  54-56
  4.2 环境部署  56-61
  4.3 数据存储与分析机制  61-69
    4.3.1 数据存储  61-64
    4.3.2 数据分析  64-69
第5章系统测试及分析  69-74
  5.1 网络优化分析  69-72
    5.1.1 指标统计  69-70
    5.1.2 故障分析  70-72
  5.2 用户及业务分析  72-74
    5.2.1 业务分析  72-73
    5.2.2 用户分析  73-74
第6章总结与展望  74-75
参考文献  75-77
致谢  77-78
附录 1 攻读硕士学位期间发表的论文  78-79
附录 2 主要英文缩写语对照表  79

基于Hadoop的CDMA分组域海量数据处理模型的研究

内容摘要

全文目录

相似论文