分布式文件系统与MPP数据库的混搭架构在电信大数据平台中的应用

张雨; 蔡鑫; 李爱民; 刘翼; 姚晓辉

doi:10.3969／j.issn.1000-0801.2013.11.003

您当前的位置：

首页 >

文章列表页 >

分布式文件系统与MPP数据库的混搭架构在电信大数据平台中的应用

大数据平台与应用 | 更新时间：2024-06-05

- 分布式文件系统与MPP数据库的混搭架构在电信大数据平台中的应用
- Application of Distribute File System ＆ MPP Database Mashup Architecture in Telecom Big Data Platform
- 电信科学 2013年29卷第11期页码：12-16
- 作者机构：
  
  1. 中国电信股份有限公司上海分公司上海200122
  2. 中国电信股份有限公司上海研究院上海200122
  3. 中国电信集团公司北京100032
- 作者简介：
  
  [ "张雨，男，中国电信股份有限公司上海分公司高级工程师、副总工程师，主要研究方向为IT规划、大数据。" ]
  [ "蔡鑫，男，中国电信股份有限公司上海研究院高级工程师、数据分析师，主要研究方向为数据规划、信息管理、数据标准。" ]
  [ "李爱民，女，中国电信集团公司企业信息化事业部工程师、数据处处长，主要研究方向为信息管理。" ]
  [ "刘翼，男，中国电信集团公司企业信息化事业部工程师、业务主管，主要研究方向为数据规划、信息管理。" ]
  [ "姚晓辉，男，中国电信股份有限公司上海研究院工程师，主要研究方向为数据规划、数据挖掘、信息管理。" ]
- 基金信息：
- DOI：10.3969／j.issn.1000-0801.2013.11.003
  中图分类号：
- 网络出版日期：2013-11，
  
  纸质出版日期：2013-11-20
- 稿件说明：
移动端阅览
张雨, 蔡鑫, 李爱民, 等. 分布式文件系统与MPP数据库的混搭架构在电信大数据平台中的应用[J]. 电信科学, 2013,29(11):12-16.

Yu Zhang, Xin Cai, Aimin Li, et al. Application of Distribute File System ＆ MPP Database Mashup Architecture in Telecom Big Data Platform[J]. Telecommunications science, 2013, 29(11): 12-16.
张雨, 蔡鑫, 李爱民, 等. 分布式文件系统与MPP数据库的混搭架构在电信大数据平台中的应用[J]. 电信科学, 2013,29(11):12-16. DOI： 10.3969／j.issn.1000-0801.2013.11.003.

Yu Zhang, Xin Cai, Aimin Li, et al. Application of Distribute File System ＆ MPP Database Mashup Architecture in Telecom Big Data Platform[J]. Telecommunications science, 2013, 29(11): 12-16. DOI： 10.3969／j.issn.1000-0801.2013.11.003.

摘要

通过对分布式文件系统和MPP数据库这两种大数据技术领域重要方向的研究比较，提出了采用混搭架构进行大数据平台架构规划和设计的思路和实现方法，并在具体项目中进行了实际验证。该架构能够兼具两种技术的优点，适应不同场景的大数据存储和处理要求。

Abstract

Distributed file system and MPP database are two important directions in the domain of big data. Based on the research of the two techniques

the sketch and implement method of big data platform architecture planning and design were put forward using the mashup architecture

and the actual verification in the specific project was carried out. This architecture can combines the advantages of both two techniques

and can adapt to the different scenes of big data storage ＆ processing requirements.

关键词

Keywords

references

周宝曜，刘伟，范承工．大数据：战略、技术、实践．北京：电子工业出版社， 2013

Apache HBase . http://hbase.apache.org/ http://hbase.apache.org/

Big data debate: will HBase dominate NoSQL . http://www.informationweek.com/software/enterprise-applications/big-data-debate-will-hbase-dominate-nosq/240159475 http://www.informationweek.com/software/enterprise-applications/big-data-debate-will-hbase-dominate-nosq/240159475

MapReduce and MPP: two sides of the big data coin . http://www.zdnet.com/blog/big-datamapreduce-and-mpp-two-sides-of-the-big-data-coin/121 http://www.zdnet.com/blog/big-datamapreduce-and-mpp-two-sides-of-the-big-data-coin/121

Greenplum Pivotal HD结合了SQL和Hadoop的优势 . http://www.infoq.com/cn/news/2013/03/Pivotal-HD-SQL-Hadoop http://www.infoq.com/cn/news/2013/03/Pivotal-HD-SQL-Hadoop

浏览量

1788

下载量

CSCD

文章被引用时，请邮件提醒。

提交

工具集

关联资源

基于Hadoop的电信大数据采集方案研究与实现