入门大数据，两天搞定Hadoop搭建

正文

请到「今天看啥」查看全文

1)大数据的概念及技术

2)大数据的技术体系

第二部分：Linux操作系统

1)掌握Linux/Ubuntu操作系统的安装和配置

•安装VMware虚拟机

•在虚拟上安装Ubuntu操作系统

2)了解Linux文件系统

3)掌握常用的Linux文件操作命令

第三部分：Hadoop环境搭建_单机模式

1)Hadoop体系介绍: 核心组件HDFS、MapReduce

2)搭建Hadoop单机模式:

•安装JDK，配置和测试环境变量

•安装Hadoop，认识Hadoop 2.x的目录结构

3)在Hadoop单机模式下运行Hadoop程序

第四部分Hadoop环境搭建_伪分布模式

1)Ubuntu系统软件源的选择和更新

2)搭建Hadoop伪分布模式:

•安装SSH服务，建立SSH信任关系，实现SSH无密码登录

•配置Hadoop

•格式化HDFS分布式文件系统

3)启动HDFS和YARN，在伪分布模式下运行Hadoop程序

第五部分：HDFS文件系统

1)HDFS分布式文件系统介绍:

•HDFS简介

•HDFS主要组件和系统架构

•HDFS的适用场景

2)HDFS操作方法：

• HDFS读、写文件剖析

• HDFS的常用操作"

第六部分：MapReduce离线计算框架，Yarn云操作系统

1)MapReduce离线运算框架:

•MapReduce并行运算模式

•MapReduce执行原理

•MapReduce开发模型

2)Yarn云操作系统：

• Yarn运行原理"

第七部分：Hadoop集群环境搭建

1)Hadoop集群模式简介

2)搭建Hadoop集群模式:

•配置集群中各节点的固定IP地址和DNS解析

•安装SSH服务,建立SSH信任关系，配置本地无密码登陆和远程无密码登陆

•安装JDK，配置环境变量

•安装Hadoop，并配置

请到「今天看啥」查看全文