南京第五十五所技术开发有限公司版本:先电Cloud-BigData-v2.1发布日期:2017年02月21日南京第五十五所技术开发有限公司1先电大数据平台用户手册版本修订说明修订版本修订时间修订说明XD-BigData-v1.32015年10月28日先电大数据平台用户册XD-BigData-v1.3.12016年1月19日增加GRE、VLAN网络的部署方法XD-BigData-v1.42016年4月12日为防止与JavaWeb中MapReduce开发混淆。删除hadoop案例开发XD-BigData-v2.02016年11月1日更新基于Ambari版本2.2.2.0二次开发的hadoop平台XD-BigData-v2.0.12016年12月30日更新镜像中与perl版本不兼容问题的解决办法;XD-BigData-v2.0.22017年01月10日升级系统版本为centos7,升级HDP版本至2.4。XD-BigData-v2.0.32017年02月13日更新软件包logoXD-BigData-v2.0.52017年02月21日更新软件包logo,修改文档“8.2.2基于项目的协同过滤”表格参数XD-BigData-v2.12017年04月21日更新用户手册2南京第五十五所技术开发有限公司目录1ﻩ概述ﻩ51.1大数据简介ﻩ51.2先电大数据平台简介ﻩ52基本环境配置ﻩ62.1ﻩ配置主机名ﻩ72.2修改hosts文件........................................................................................................72.3ﻩ修改yum源.................................................................................................................72.4配置ntp......................................................................................................................82.5ﻩ配置SSH.......................................................................................................................92.6禁用TransparentHugePages...............................................................................92.7安装配置JDKﻩ103配置ambari-serverﻩ113.1安装MariaDB数据库...............................................................................113.2ﻩ安装配置ambari-serverﻩ214配置ambari-agent.......................................................................................................145部署管理Hadoop集群.........................................................................................................145.1ﻩ部署Hadoop集群.................................................................................................145.2HDFS运维管理ﻩ215.3ﻩMapReduceﻩ316部署Hive数据仓库ﻩ336.1ﻩ部署Hiveﻩ336.1ﻩHive用户指南.................................................................................................................357部署Hbase分布式列数据库...................................................................................................457.1部署HBase............................................................................................................457.2ﻩ测试验证...........................................................................................................................477.3ﻩHBase用户指南ﻩ478部署Mahout数据挖据工具................................................................................................538.1部署Mahoutﻩ538.2测试验证...............................................................................................................549ﻩ部署Pig数据分析平台...........................................................................................................55第3页共82页南京第五十五所技术开发有限公司9.1部署Pig...........................................................................................................5...