大数据学习路径

下载后可任意编辑大数据经典学习路线（及供参考）1.Linux 基础和分布式集群技术学完此阶段可掌握的核心能力：熟练使用 Linux，熟练安装 Linux 上的软件，了解熟悉负载均衡、高可靠等集群相关概念，搭建互联网高并发、高可靠的服务架构；学完此阶段可解决的现实问题：搭建负载均衡、高可靠的服务器集群，可以增大网站的并发访问量，保证服务不间断地对外服务；学完此阶段可拥有的市场价值：具备初级程序员必要具备的 Linux 服务器运维能力。1.内容介绍：在大数据领域，使用最多的操作系统就是 Linux 系列，并且几乎都是分布式集群。该课程为大数据的基础课程，主要介绍 Linux 操作系统、Linux 常用命令、Linux 常用软件安装、Linux 网络、防火墙、Shell 编程等。2.案例：搭建互联网高并发、高可靠的服务架构。下载后可任意编辑2.离线计算系统课程阶段1. 离线计算系统课程阶段HADOOP 核心技术框架学完此阶段可掌握的核心能力：1、通过对大数据技术产生的背景和行业应用案例了解 hadoop 的作用；2、掌握 hadoop底层分布式文件系统 HDFS 的原理、操作和应用开发；3、掌握 MAPREDUCE 分布式运算系统的工作原理和分布式分析应用开发；4、掌握 HIVE 数据仓库工具的工作原理及应用开发。学完此阶段可解决的现实问题：1、熟练搭建海量数据离线计算平台；2、根据具体业务场景设计、实现海量数据存储方案；3、根据具体数据分析需求实现基于 mapreduce 的分布式运算程序；下载后可任意编辑学完此阶段可拥有的市场价值：具备企业数据部初级应用开发人员的能力1.1 HADOOP 快速入门1.1.1 hadoop 知识背景什么是 hadoop、hadoop 产生背景、hadoop 在大数据云计算中的位置和关系、国内hadoop 的就业情况分析及课程大纲介绍国内外 hadoop 应用案例介绍下载后可任意编辑分布式系统概述、hadoop 生态圈及各组成部分的简介1.1.2 HIVE 快速入门hive 基本介绍、hive 的使用、数据仓库基本知识1.1.3 数据分析流程案例下载后可任意编辑web 点击流日志数据挖掘的需求分析、数据来源、处理流程、数据分析结果导出、数据展现1.1.4 hadoop 数据分析系统集群搭建集群简介、服务器介绍、网络环境设置、服务器系统环境设置、 JDK 环境安装、hadoop集群安装部署、集群启动、集群状态测试HIVE 的配置安装、HIVE 启动、HIVE 使用测试1.2 HDFS 详解1.2.1 HDFS 的概念和特性什么是分布式文件系统、HDFS 的设计目标、HDFS 与其...