Method of Building Signaling Big Data Real-Time Query Platform Based on Hadoop

doi:10.11959/j.issn.1000-0801.2015186

您当前的位置：

首页 >

文章列表页 >

Method of Building Signaling Big Data Real-Time Query Platform Based on Hadoop

Wide operating technology | 更新时间：2024-06-05

- Method of Building Signaling Big Data Real-Time Query Platform Based on Hadoop
- Telecommunications Science Vol. 31, Issue 7, Pages: 145-151(2015)
- 作者机构：
  
  1. 广东交通职业技术学院计算机工程学院广州510650
  2. 中国移动通信集团广东有限公司广州510623
- 作者简介：
- 基金信息：
- DOI：10.11959/j.issn.1000-0801.2015186
  CLC：
- Published Online：2015-07，
  
  Published：20 July 2015
- 稿件说明：
移动端阅览
Method of Building Signaling Big Data Real-Time Query Platform Based on Hadoop[J]. Telecommunications science, 2015, 31(7): 145-151.
DOI：

Method of Building Signaling Big Data Real-Time Query Platform Based on Hadoop[J]. Telecommunications science, 2015, 31(7): 145-151. DOI： 10.11959/j.issn.1000-0801.2015186.

摘要

随着电信行业4G通信网络技术的普及，移动端互联网应用正蓬勃发展，随之带来的数据流量呈爆炸式增长，传统的处理方法难以支撑海量信令数据的实时查询需求，为此，提出了一种基于Hadoop 的大数据实时查询平台，以支撑超大规模的信令详单的处理。通过数据采集、数据建模、rowkey设计、数据入库、二级索引、数据压缩与存储等实现方法，提供了实时数据查询服务。最后，在现网实验环境进行了验证，能够取得非常好的收益。

Abstract

With the popularity of 4G communication technology，and development of mobile internet application，the data flow is booming，and traditional processing method is difficult to support the massive signalling data real-time query requirement.Therefore，a kind of data real-time query platform based on Hadoop was put forward，to support the details of a single large scale signaling processing.Through data collection，data modeling，rowkey design，data compression and storage，etc.，real-time data query service was provided.Finally，the experimental environment of the current network was verified，which could get very good income.

关键词

Keywords

references

White T . Hadoop：The Definitive Guide . Sebastopo ： O’Reilly Media ， 2012

George L . HBase：The Definitive Guide . Canada ： O’Reilly Media ， 2011

Dimiduk N . HBase in Action . Greenwich ： Manning Publications ， 2012

汤雅妃，魏进武，张云勇 . 基于大数据的信令监测系统研究 . 邮电设计技术， 2014 （ 7 ）： 47 ～ 52

Tang Y F ， Wei J W ， Zhang Y Y . Research on big data based signaling monitoring platform . China Unicom Research Institute ， 2014 （ 7 ）： 47 ～ 52

傅巍玮，李仁发，刘钰峰等 . 基于solr的分布式实时搜索模型研究与实现 . 电信科学， 2011 ， 27 （ 11 ）： 51 ～ 56

Fu W W ， Li R F ， Liu Y F ， et al . Study and implementation of distributed real-time search engine model based on solr . Telecommunications Science ， 2011 ， 27 （ 11 ）： 51 ～ 56

陈娜，张金娟，刘智琼等 . 基于Hadoop平台的电信大数据入库及查询性能优化研究 . 移动通信， 2014 （ 7 ）： 58 ～ 63

Chen N ， Zhang J J ， Liu Z Q ， et al . Research on loading and querying performance tuning of telecom big data based on Hadoop platform . Mobile Communications ， 2014 （ 7 ）： 58 ～ 63

张雨，蔡鑫，李爱民等 . 分布式文件系统与 MPP 数据库的混搭架构在电信大数据平台中的应用 . 电信科学， 2013 ， 29 （ 11 ）： 12 ～ 16

Zhang N ， Cai X ， Li A M ， et al . Application of distribute file system ＆ MPP database mashup architecture in telecom big data platform . Telecommunications Science ， 2013 ， 29 （ 11 ）： 12 ～ 16

Views

939

下载量

CSCD

Alert me when the article has been cited

提交

Tools

Publicity Resources

电信政企营销客户关系图谱构建

RPA+AI在网络爬虫领域应用的探讨

基于大数据的用户感知综合评价方法

基于信令数据的疫情防控时空伴随者挖掘模型

3G智能移动警务系统设计

Related Author

朱伟宝

张晨

刘媛

熊峻峰

胡一伟

龚旭

丁沈媛

周铭

Related Institution

中国电信股份有限公司上海分公司

上海理想信息产业（集团）有限公司

College of Computer Science, Beijing University of Technology

Beijing Municipal Key Laboratory of Trusted Computing

National Engineering Laboratory for Critical Technologies of Information Security Classified Protection

⁰