hadoop安装在win10

1.如何在windows下安装hadoop

Hadoop三种安装模式:单机模式,伪分布式,真正分布式一 单机模式standalone单机模式是Hadoop的默认模式。

当首次解压Hadoop的源码包时,Hadoop无法了解硬件安装环境,便保守地选择了最小配置。在这种默认模式下所有3个XML文件均为空。

当配置文件为空时,Hadoop会完全运行在本地。因为不需要与其他节点交互,单机模式就不使用HDFS,也不加载任何Hadoop的守护进程。

该模式主要用于开发调试MapReduce程序的应用逻辑。二 伪分布模式安装tar xzvf hadoop-0.20.2.tar.gzHadoop的配置文件:conf/hadoop-env.sh 配置JAVA_HOMEcore-site.xml 配置HDFS节点名称和地址hdfs-site.xml 配置HDFS存储目录,复制数量mapred-site.xml 配置mapreduce的jobtracker地址配置ssh,生成密匙,使到ssh可以免密码连接(RSA算法,基于因数不对称加密:公钥加密私钥才能解密,私钥加密公钥才能解密)cd /rootssh -keygen -t rsacd .sshcp id_rsa.pub authorized_keys覆盖公钥,就能免密码连接启动Hadoop bin/start-all.sh停止Hadoop bin/stop-all.sh三 完全分布式模式1. 配置etc/hosts文件,使主机名解析为IP 或者使用DNS服务解析主机名2. 建立hadoop运行用户: useradd grid>passwd grid3. 配置ssh密码连入: 每个节点用grid登录,进入主工作目录,ssh -keygen -t rsa生产公钥,然后将每个节点的公钥复制到同一个文件中,再将这个包含所有节点公钥的文件复制到每个节点authorized_keys目录,这个每个节点之间彼此可以免密码连接4. 下载并解压hadoop安装包5. 配置namenode,修改site文件6. 配置hadoop-env.sh7. 配置masters和slaves文件8. 向各个节点复制hadoop9. 格式化namenode10.启动hadoop11.用jps检验各后台进程是否成功启动。

2.如何在windows下安装hadoop

Hadoop三种安装模式:单机模式,伪分布式,真正分布式

一 单机模式standalone

单机模式是Hadoop的默认模式。当首次解压Hadoop的源码包时,Hadoop无法了解硬件安装环境,便保守地选择了最小配置。在这种默认模式下所有3个XML文件均为空。当配置文件为空时,Hadoop会完全运行在本地。因为不需要与其他节点交互,单机模式就不使用HDFS,也不加载任何Hadoop的守护进程。该模式主要用于开发调试MapReduce程序的应用逻辑。

二 伪分布模式安装

tar xzvf hadoop-0.20.2.tar.gz

Hadoop的配置文件:

conf/hadoop-env.sh 配置JAVA_HOME

core-site.xml 配置HDFS节点名称和地址

hdfs-site.xml 配置HDFS存储目录,复制数量

mapred-site.xml 配置mapreduce的jobtracker地址

配置ssh,生成密匙,使到ssh可以免密码连接

(RSA算法,基于因数不对称加密:公钥加密私钥才能解密,私钥加密公钥才能解密)

cd /root

ssh -keygen -t rsa

cd .ssh

cp id_rsa.pub authorized_keys覆盖公钥,就能免密码连接

启动Hadoop bin/start-all.sh

停止Hadoop bin/stop-all.sh

三 完全分布式模式

1. 配置etc/hosts文件,使主机名解析为IP 或者使用DNS服务解析主机名

2. 建立hadoop运行用户: useradd grid>passwd grid

3. 配置ssh密码连入: 每个节点用grid登录,进入主工作目录,ssh -keygen -t rsa生产公钥,然后将每个节点的公钥复制到同一个文件中,再将这个包含所有节点公钥的文件复制到每个节点authorized_keys目录,这个每个节点之间彼此可以免密码连接

4. 下载并解压hadoop安装包

5. 配置namenode,修改site文件

6. 配置hadoop-env.sh

7. 配置masters和slaves文件

8. 向各个节点复制hadoop

9. 格式化namenode

10.启动hadoop

11.用jps检验各后台进程是否成功启动。

3.windows怎么安装hadoop

在windows下安装Eclipse Hadoop插件主要安装编译Eclipse-hadoop插件即可。

1、配置环境变量:把下载好的hadoop-2.5.2解压到D盘的根目录下,然后计算机==》属性==》高级系统设置==》环境变量

2、把hadoop-eclipse-plugin-2.6.0.jar放到eclipse==》plugins目录下面,重启Eclipse,打开Window==》Preferences,能够看到Hadoop Map/Reduce就是插件安装成功,下面指定Hadoop的安装目录即第一步设定的HADOOP_HOME。

3、新建Map/Reduce Project工程

4、输入工程名称,然后点击Finish按钮

可以看到如下图所示,可以看到有新建的工程还有自动生成的DFS Locations,此时点击DFS Locations什么都不会看到,因为还没有配置其相应的HDFS:

5、显示Hadoop的Map/Reduce Locations视图,配置Hadoop Locations

Window==》Show View==》Other,找到Map/Reduce Tools下的Map/Reduce Locations,并点击ok。

设置下面几个参数:

hadoop安装在win10

转载请注明出处windows之家 » hadoop安装在win10

win10

win10怎么安装子系统

阅读(210)

本文主要为您介绍win10怎么安装子系统,内容包括如何安装win10linux子系统,怎样安装win10linux子系统,如何给win10手机安装安卓子系统。打开windows10开发人员模式,打开步骤为:设置-->更新和安全-->针对开发人员,点击开发人员模式打开即可,

win10

win10电脑开机后会重启一次

阅读(120)

本文主要为您介绍win10电脑开机后会重启一次,内容包括win10系统自动重启问题,win10电脑自动重启是什么原因造成的,Windows10系统无限自动重启怎么解决。出现这种情况,一般有以下几点原因:可能是系统或程序间有不兼容的地方,开机按F8不动到高级

win10

时崎狂三win10电脑主题

阅读(124)

本文主要为您介绍时崎狂三win10电脑主题,内容包括怎么让桌面壁纸和主题一样?,如何在Windows10中使用第三方主题,windows10官方下载的主题,里面都不止包含一张图片,

win10

win10怎样修改电脑用户头像

阅读(117)

本文主要为您介绍win10怎样修改电脑用户头像,内容包括windows10怎么改本地账户头像,Win10怎么更换用户头像,windows10系统怎么设置电脑账户的头像。方法/步骤在系统中点击【开始】----【电脑设置】2、在个性化设置界面中点击【用户头像】3

win10

win10电脑无法打开宽带连接

阅读(99)

本文主要为您介绍win10电脑无法打开宽带连接,内容包括如何解决处理Win10系统电脑宽带连接打不开的,win10电脑怎么宽带连接连不上,win10无法连接到宽带连接。我们需要做的是更新一下网卡驱动,可以下载360驱动大师、驱动精灵、驱动人生更新,在

win10

正版win10换电脑了

阅读(82)

本文主要为您介绍正版win10换电脑了,内容包括Win10正版激活的,换电脑了,我该怎么办,我买过正版的WIN10专业版,但是我换电脑了,WIN10还要重新购买吗,激活win10换电脑后怎么办。1. 选择“开始” 按钮、依次选择“设置” >“更新和安全” >“

win10

win10电脑开机后密码页面没了

阅读(136)

本文主要为您介绍win10电脑开机后密码页面没了,内容包括Windows10登录密码界面不出来,win10开机登陆界面密码框消失?,Win10开机不显示密码输入框怎么办。Win10开机不显示登录界面没有密码登录框的解决方法如下:先来看一下Windows10系统不出

win10

win1064位安装时黑屏

阅读(71)

本文主要为您介绍win1064位安装时黑屏,内容包括win10重装系统后黑屏,Win10安装过程中黑屏怎么解决,安装Windows10黑屏,怎么办?。电脑黑屏无法进入win10系统解决方法方法一:如果是系统故障导致,需进入安全模式修复按下开机键,出现win10系统徽标

win10

win10系统的扫描驱动怎么安装不了

阅读(102)

本文主要为您介绍win10系统的扫描驱动怎么安装不了,内容包括win10网络扫描仪驱动怎么安装不上,windows10系统怎样安装扫描仪驱动,电脑怎么安装扫描仪驱动win10。如果还没有升级N卡驱动的Win10用户,可以通过下面的方式关闭Windows10系统的自

win10

win10安装后无法更新失败

阅读(93)

本文主要为您介绍win10安装后无法更新失败,内容包括windows10更新失败怎么办,windows10安装更新失败错误,关于win10系统更新不成功的问题?。试下面的方法:首先卸载所有第三方杀毒软件和管理软件。重启Windows更新服务。方法为打开记事本,复制

win10

win10装网络打印机驱动怎么安装

阅读(117)

本文主要为您介绍win10装网络打印机驱动怎么安装,内容包括win10怎么安装网络打印机驱动程序,win10系统怎么安装网络打印机驱动程序,win10电脑怎样添加网络打印机。工具/原料Win10打印机方法/步骤1首先右击屏幕左下角“开始”菜单,在弹出的快

win10

win10安装找不到ssd

阅读(121)

本文主要为您介绍win10安装找不到ssd,内容包括win10重装后,系统里没有固态硬盘了,原来有,设备管理器可以看,win10重装系统后找不到固态盘怎么办,联想win10系统,装ssd,bios启动顺序里找不到ssd。最近有用户反馈在安装win10系统的时候,在选择

win10

用友t3不能安装到win10

阅读(135)

本文主要为您介绍用友t3不能安装到win10,内容包括电脑windows10安装不了用友t3怎么办,用友t3能安装到windows10吗,t3用友能安装到win10上吗。win7用友t3软件安装步骤:打开用友t3考试专版,双击setup.exe。点击“下一步”。用户名跟公司名称不

win10

win10安装xp后没有启动不了

阅读(88)

本文主要为您介绍win10安装xp后没有启动不了,内容包括我装了win10在装xp的系统怎么启动项里没有xp的启动项,在win10下安装winxp,引导修复了一下,结果启动菜单里没有了win,请问一下,thinkpad原来是win10系统,现在用ghost安装了xp系统用。WIN

win10

win10怎么安装子系统

阅读(210)

本文主要为您介绍win10怎么安装子系统,内容包括如何安装win10linux子系统,怎样安装win10linux子系统,如何给win10手机安装安卓子系统。打开windows10开发人员模式,打开步骤为:设置-->更新和安全-->针对开发人员,点击开发人员模式打开即可,

win10

win10电脑开机后会重启一次

阅读(120)

本文主要为您介绍win10电脑开机后会重启一次,内容包括win10系统自动重启问题,win10电脑自动重启是什么原因造成的,Windows10系统无限自动重启怎么解决。出现这种情况,一般有以下几点原因:可能是系统或程序间有不兼容的地方,开机按F8不动到高级

win10

时崎狂三win10电脑主题

阅读(124)

本文主要为您介绍时崎狂三win10电脑主题,内容包括怎么让桌面壁纸和主题一样?,如何在Windows10中使用第三方主题,windows10官方下载的主题,里面都不止包含一张图片,

win10

win10怎样修改电脑用户头像

阅读(117)

本文主要为您介绍win10怎样修改电脑用户头像,内容包括windows10怎么改本地账户头像,Win10怎么更换用户头像,windows10系统怎么设置电脑账户的头像。方法/步骤在系统中点击【开始】----【电脑设置】2、在个性化设置界面中点击【用户头像】3

win10

win10电脑无法打开宽带连接

阅读(99)

本文主要为您介绍win10电脑无法打开宽带连接,内容包括如何解决处理Win10系统电脑宽带连接打不开的,win10电脑怎么宽带连接连不上,win10无法连接到宽带连接。我们需要做的是更新一下网卡驱动,可以下载360驱动大师、驱动精灵、驱动人生更新,在

win10

正版win10换电脑了

阅读(82)

本文主要为您介绍正版win10换电脑了,内容包括Win10正版激活的,换电脑了,我该怎么办,我买过正版的WIN10专业版,但是我换电脑了,WIN10还要重新购买吗,激活win10换电脑后怎么办。1. 选择“开始” 按钮、依次选择“设置” >“更新和安全” >“

win10

win10电脑开机后密码页面没了

阅读(136)

本文主要为您介绍win10电脑开机后密码页面没了,内容包括Windows10登录密码界面不出来,win10开机登陆界面密码框消失?,Win10开机不显示密码输入框怎么办。Win10开机不显示登录界面没有密码登录框的解决方法如下:先来看一下Windows10系统不出

win10

win10连接别人电脑共享打印机共享

阅读(166)

本文主要为您介绍win10连接别人电脑共享打印机共享,内容包括win10怎么设置链接别人共享的打印机,w10怎么添加共享打印机共享,win10系统怎么共享别人的打印机。双击Win10桌面上的控制面板,点击控制面板上的“设备和打印机”,如下图所示。 2 点