大数据分析:学习工具Hadoop,基本安装指导

大数据 Hadoop
Hadoop版本主要分为原生Apache Hadoop版和Hadoop商业发行版两种,而其中商业发行版Hadoop多为原生Apache Hadoop的集群模式下的优化版,除少数社区版外,商业发行版大多需要付费使用,且对于初学者而言使用难度较大,因此本教程主要采用Apache Hadoop进行安装与使用方面教学。

Hadoop版本主要分为原生Apache Hadoop版和Hadoop商业发行版两种,而其中商业发行版Hadoop多为原生Apache Hadoop的集群模式下的优化版,除少数社区版外,商业发行版大多需要付费使用,且对于初学者而言使用难度较大,因此本教程主要采用Apache Hadoop进行安装与使用方面教学。同时,兼顾一线企业实际使用差别和教学PC机器性能,本次课程将主要采用Apache Hadoop 2.6.5版本。

如何下载Hadoop

打开Hadoop官网下载地址,页面如下图所示,根据提示选择2.6.5二进制压缩版。

 

大数据分析:学习工具Hadoop,基本安装指导

由于是在国内,为了保证下载速度我们可以选择清华的软件仓库下载。(url图片太小)

 

大数据分析:学习工具Hadoop,基本安装指导

此时浏览器弹出下载提示窗口,选择路径下载即可。注:不同浏览器的下载提示窗口会有所不同。

 

大数据分析:学习工具Hadoop,基本安装指导

hadoop的安装步骤

打开Ubuntu虚拟机,通过Xshell连接。用户主目录(/home/hduser)下创建software目录,在Xshell终端中输入命令mkdir software。

 

大数据分析:学习工具Hadoop,基本安装指导

后续用到的软件安装文件都将放在这里,便于管理。

打开WinSCP软件并连接登录ubuntu虚拟机,登录成功后默认进入当前用户主目录,双击刚创建的software目录

 

大数据分析:学习工具Hadoop,基本安装指导

双击后跳转到software目录下

 

大数据分析:学习工具Hadoop,基本安装指导

将下载的hadoop-2.6.5.tar.gz上传至Ubuntu虚拟机的software目录下,方法是:按下图鼠标拖动hadoop-2.6.5.tar.gz至software目录即可。

 

大数据分析:学习工具Hadoop,基本安装指导

 

大数据分析:学习工具Hadoop,基本安装指导

代传输完成,hadoop二进制压缩文件hadoop2.6.5.tar.gz就存在于ubuntu虚拟机software文件目录下了。

 

大数据分析:学习工具Hadoop,基本安装指导

在Xshell中通过命令ls software/即可查看software目录内文件信息。如下图所示上传成功

 

大数据分析:学习工具Hadoop,基本安装指导

将hadoop-2.6.5.tar.gz解压到当前用户主目录下,方法:在用户主目录下输入命令tar -zxvf./software/hadoop-2.6.5.tar.gz,然后回车键执行

 

大数据分析:学习工具Hadoop,基本安装指导

回车开始执行后压缩文件开始解压

 

大数据分析:学习工具Hadoop,基本安装指导

压缩文件会被解压到用户主目录下,解压完成后会查看当前用户主目录下的文件,如下图所示可以看到文件hadoop-2.6.5,此文件即为解压后的文件夹。

 

大数据分析:学习工具Hadoop,基本安装指导

由于解压后的文件名有些长,我们可以为其更换文件名为hadoop,改名可以有如下方式:执行命令mv hadoop-2.6.5/ ./hadoop即可。如下图所示通过ls命令查看更名已经成功。

 

大数据分析:学习工具Hadoop,基本安装指导

小伙伴们有没有疑问hadoop文件目录下都有哪些文件呢,主要会用到哪几个?下面我带大家看一看。跳转到hadoop文件目录下之后执行ls -l命令

 

大数据分析:学习工具Hadoop,基本安装指导

目录&简介

 

大数据分析:学习工具Hadoop,基本安装指导

到这里Hadoop的基本安装已经完成,明天我们介绍将Hadoop路径添加到用户系统环境变量、hadoop配置。

责任编辑:未丽燕 来源: 今日头条
相关推荐

2018-06-05 12:06:20

Hadoop开源工具

2015-09-08 09:24:26

大数据分析采购

2012-05-30 11:29:14

Hadoop大数据

2011-09-02 10:59:02

大数据数据分析Hadoop

2013-04-28 10:01:28

HDInsightWindows AzuHadoop

2016-12-22 09:52:13

Hadoop大数据分析

2012-08-08 09:53:23

HadoopMapReduce

2021-03-15 10:43:20

大数据数据分析工具

2020-04-08 16:41:18

大数据Hadoop工具

2013-12-18 11:26:08

Hadoop大数据

2018-04-20 12:12:18

数据分析可视化数据挖掘

2016-12-15 21:15:58

大数据

2018-10-24 14:32:15

数据分析数据科学算法

2021-05-14 13:53:28

大数据数据分析工具

2015-07-08 15:07:23

大数据分析多少种工具

2015-08-21 13:54:38

大数据

2013-10-30 09:13:35

微软Hadoop AzurWindows Azu

2017-09-18 17:59:23

Hadoop数据分析

2015-08-14 10:28:09

大数据

2014-06-19 13:29:29

机器学习大数据
点赞
收藏

51CTO技术栈公众号