换一批摘要针对传统计算环境中海量数据存储、分析处理效率、实时性、完整性和数据维护费用等难题,利用云计算环境的超大规模、虚拟化、经济和安全可靠等特点,进行海量数据分析。基于分布式计算架构Hadoop,利用并行计算框架 Map/Reduce,构建了典型的云计算环境,并采用数据仓库分析平台 Hive,实现了高效、实用的海量数据分析系统的设计。以系统总体框架设计为基础,从客户端分析、接收服务器、后端数据分析和数据可视化等模块完成了系统设计,对海量数据分析处理系统设计具有一定参考价值。
更多相关知识
关键词
海量数据分析云计算环境分布式计算并行处理系统设计massive data analysiscloud computing environmentdistributed computingparallel processingsystem design
分类号
TP311.5
DOI
10.3969/j.issn.1003-5311.2015.09.013
发布时间
2015-11-09（万方平台首次上网日期，不代表论文的发表时间）
- 浏览1
- 被引1
- 下载0
相似文献
- 中文期刊
- 外文期刊
- 学位论文
- 会议论文
