博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
在windows本地使用eclipse操作hadoopHDFS客户端,进行文件的上传下载测试
阅读量:6950 次
发布时间:2019-06-27

本文共 792 字,大约阅读时间需要 2 分钟。

hot3.png

首先需要明白,在windows使用eclipse操作linux系统中安装的hadoop集群,需要在本地也安装一份hadoop,这个hadoop需要在本地进行编译才能使用。

1.编译hadoop,编译教程很多,可以去搜索,或者直接下载已经编译好的bin文件。

下载连接:http://download.csdn.net/detail/u010286605/9743359

2.解压一份hadoop到本地,将上面准备好的bin合并到到hadoop的安装目录中的bin,然后配置环境变量,

路径是hadoop 的bin文件。例如:我安装的路径是:G:\hadoop-2.6.4   环境变量path中配置为:G:\hadoop-2.6.4\bin;

3.测试:打开黑窗口,直接输入:winutils.exe如下则成功

212655_buLQ_2913509.png

4.eclipse测试代码

新建java project

    public static void main(String[] args) throws Exception {

        Configuration conf = new Configuration();
        conf.set("fs.defaultFS", "hdfs://ip地址:9000");//ip地址为hadoop的主服务器
//        拿到一个文件系统操作的客户端对象
        FileSystem fs = FileSystem.get(conf);
        fs.copyFromLocalFile(new Path("d:/mylog.log"), new Path("/mylog.log.copy"));//测试文件
        fs.close();
    }

运行时加上参数

213054_kSZr_2913509.png

5.浏览器打开http://ip地址:50070/

查看

213206_m2Ee_2913509.png

成功

转载于:https://my.oschina.net/luleilei516/blog/829408

你可能感兴趣的文章
redis 介绍与安装
查看>>
letdown
查看>>
Action以外的类中来获得Spring所管理的Service对象
查看>>
Linux系统下手把手完成无人值守安装服务
查看>>
pyfa的汉化
查看>>
使用@Transactional(SUPPORTS)和不加@Transactional 有什么区别?
查看>>
JS判断一个页面是否已经打开
查看>>
TPS和QPS的区别
查看>>
设计模式--模板方法模式
查看>>
Removing Nesting By Returning Early
查看>>
Jfinal weixin源码分析---碎碎念(看最后,有福利)
查看>>
[Java]HashMap的两种排序方式
查看>>
C++中const与指针、引用的分析(转自china_unix GP-King)
查看>>
mysql 保存emoji 4字节宽度字符串
查看>>
diff结果分析
查看>>
php UUID &分布式生成用不重复的随机数方法
查看>>
C语言中强制转换问题
查看>>
python--练习--for i in range(2,101)
查看>>
每天一个linux命令(25):chgrp命令
查看>>
【15】万魂杀服务器开发之原始NIO、Mina、Netty使用
查看>>