hadoop2集群安装和测试之window开发环境

雨点打透心脏的1/2处 2022-08-08 20:58 124阅读 0赞

**1、配置hadoop环境**  
复制一份linux的安装配置好的hadoop放到Windows指定目录  
并配置环境变量  
HADOOP\_HOME=E:\\hadoop\\hadoop-2.6.0  
追加环境变量path内容：%HADOOP\_HOME%/bin  
下载https://github.com/amihalik/hadoop-common-2.6.0-bin目录bin下的文件替换hadoop目录下bin  
注意：高版本会有权限问题：如：PrivilegedActionException as:dell (auth:SIMPLE) cause:ExitCodeException exitCode=-1073741515:   
建议将https://github.com/srccodes/hadoop-common-2.2.0-bin/先复制到hadoop目录下bin，在将hadoop-common-2.6.0-bin下的hadoop.dll替换到hadoop目录下bin  
**2、下载eclipse插件**  
在https://github.com/winghc/hadoop2x-eclipse-plugin下载对应的hadoop版本https://github.com/winghc/hadoop2x-eclipse-plugin/blob/master/release/hadoop-eclipse-plugin-2.6.0.jar  
并放到eclipse的features目录，并重启eclipse  
**3、配置eclipse**

打开菜单Window--Preference--Hadoop Map/Reduce进行配置，指定hadoop安装目录E:\\hadoop\\hadoop-2.6.0

![Center][]

显示Hadoop连接配置窗口：Window--Show View--Other-MapReduce Tools，并新增配置连接Hadoop

![Center 1][]

配置完成刷新左侧的DFS Locations，可以看到hdfs文件

![Center 2][]

配置完毕。

参考文章：[http://www.cnblogs.com/huligong1234/p/4137133.html][http_www.cnblogs.com_huligong1234_p_4137133.html]

[Center]: /images/20220731/601d451d80e9466484f56ca2f56114cf.png
[Center 1]: /images/20220731/038136c2d59946c7876b0a6c08a4ae35.png
[Center 2]: /images/20220731/f01a35ced74e473295eb2b1111ff3dca.png
[http_www.cnblogs.com_huligong1234_p_4137133.html]: http://www.cnblogs.com/huligong1234/p/4137133.html

发表评论取消回复

表情：

评论列表（有 0 条评论，124人围观）

还没有评论，来说两句吧...

相关阅读

相关 Linux查看Hadoop集群,Hadoop实战之Hadoop集群功能简单测试验证

前几天对Hadoop分布式集群的安装过程进行了总结，对hadoop的集群搭建只是学习hadoop中的艰难的一步，后面还需要学习更多的知识，不知道自己能不能坚持下去，不知道后面还

阳光穿透心脏的1/2处/ 2023年01月22日 05:50/ 0 赞/ 14 阅读

相关 Hadoop集群之吞吐能力测试

Hadoop集群之吞吐能力测试一、测试HDFS写性能测试内容：向HDFS集群写10个128M的文件 [hadoop@hadoop102 map

落日映苍穹つ/ 2022年12月27日 07:29/ 0 赞/ 106 阅读

相关 Hadoop集群安装和配置

集群规划： ![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L

痛定思痛。/ 2022年12月16日 06:00/ 0 赞/ 275 阅读

相关 Hadoop2.7集群安装

目录 1 准备... 1 2 Host1 3 SSH.. 1 4 文件目录... 2 5

た入场券/ 2022年09月25日 01:16/ 0 赞/ 181 阅读

相关 Hadoop1.1 和Hadoop 2.4 集群安装版

1 环境准备 1.1 硬件配置 Dell 960 CPU英特尔酷睿2 四核 Q8300 @ 2.50GHz 内存：4GB 硬盘：320GB 安装Window

我就是我/ 2022年08月13日 19:41/ 0 赞/ 130 阅读

相关 hadoop2集群安装和测试之demo测试

demo实现如下功能：对tomcat的访问日志，统计其客户端IP的访问次数。新建Map/Reduce Project ：hadoop-demo 在src目录下创建log

柔情只为你懂/ 2022年08月08日 20:58/ 0 赞/ 137 阅读

相关 hadoop2集群安装和测试之window开发环境

1、配置hadoop环境复制一份linux的安装配置好的hadoop放到Windows指定目录并配置环境变量 HADOOP\_HOME=E:\\hadoop\\

雨点打透心脏的1/2处/ 2022年08月08日 20:58/ 0 赞/ 125 阅读

相关 hadoop2集群安装和测试之软件安装配置

二、安装JDK 使用hadoop用户，下载jdk-7u79-linux-x64.gz到用户根目录 tar -zxvf jdk-7u79-linux-x64.gz

桃扇骨/ 2022年08月08日 20:58/ 0 赞/ 165 阅读

相关 hadoop2集群安装和测试之环境配置

通过配置hadoop2集群，一个namenode，多个datanode节点，并通过一个demo对Hadoop2尝试，这里不牵扯理论知识，想了解理论知识的，可以去百度。使用had

柔情只为你懂/ 2022年08月08日 20:30/ 0 赞/ 135 阅读

相关安装hadoop1.2.1集群环境

一、规划 1、硬件资源 ip6:centos-node6 ip7:centos-node7 ip8:centos-node8 2、基本资料

悠悠/ 2022年07月16日 05:50/ 0 赞/ 303 阅读