节点文献

基于Hadoop的大数据处理平台研究

Study on big data processing platform based on Hadoop

  • 推荐 CAJ下载
  • PDF下载
  • 不支持迅雷等下载工具,请取消加速工具后下载。

【作者】 朱颢东冯嘉美张志锋

【Author】 ZHU Haodong;FENG Jiamei;ZHANG Zhifeng;School of Computer and Communication Engineering,Zhengzhou University of Light Industry;School of Software,Zhengzhou University of Light Industry;

【机构】 郑州轻工业学院计算机与通信工程学院郑州轻工业学院软件学院

【摘要】 大数据时代的到来伴随着海量数据,进而使得筛选出具有价值的信息成为大数据被广泛应用的核心步骤.在此情况下Apache Hadoop顺势而生,其通过简化数据密集、高度并行的分布式应用来应对大数据带来的挑战.由于目前基于Hadoop的大数据平台在多领域普遍使用,从而平台搭建成为进行大数据探索的第一步.而很多文章介绍的平台搭建是在虚拟机中完成,与真实情况存在相应差异.本文讨论以真实集群为基础搭建Hadoop平台的原因,Hadoop集群的强大功能,搭建平台所需设备、环境、安装、设置及测试过程.

【Abstract】 The age of big data is companied by massive data,making the selection of valuable information become a core step for wide usage of big data.Apache Hadoop is invented in this case and addressing the challenges from big data via simplifying data intensive and highly parallel distributed applications.The current big data based on Hadoop platform is widely used,so constructing aplatform becomes the first step of exploration in big data.This paper describes the reason of Hadoop platform construct based on real cluster and the powerful function of Hadoop cluster as well as equipment,environment,installation,setting and testing process in the construction process.

【关键词】 Hadoop大数据分布式应用
【Key words】 Hadoopdig datadistributed application
【基金】 河南省科技计划项目(152102210357,152102210149);河南省高等学校青年骨干教师资助计划项目(2014GGJS-084);河南省高等学校重点科研项目(16A520030);郑州轻工业学院校级青年骨干教师培养对象资助计划项目(XGGJS02);郑州轻工业学院博士科研基金资助项目(2010BSJJ038);郑州轻工业学院研究生科技创新基金资助项目
  • 【文献出处】 华中师范大学学报(自然科学版) ,Journal of Central China Normal University(Natural Sciences) , 编辑部邮箱 ,2017年05期
  • 【分类号】TP311.13
  • 【被引频次】24
  • 【下载频次】418
节点文献中: 

本文链接的文献网络图示:

本文的引文网络