进入/home/hadoop-2.4.0/bin目录
列出根目录:hadoop fs -ls
创建目录:hadoop fs -mkdir /root
删除目录:hadoop fs -rmr /root
本地文件到HDFS:hadoop fs -put /home/test.txt /root/test.txt
HDFS到本地文件:hadoop fs -get /root/test.txt /home/test.txt
查看文件:hadoop fs -cat /root/test.txt
目录赋权限: hadoop fs -chmod 777 /root
可以通过http://master:50070访问HDFS的web管理页面
读文件
String uri = "hdfs://master:9000/input/file01";
Configuration conf = new Configuration();
FileSystem fs = FileSystem.get(URI.create(uri), conf);
InputStream in = fs.open(new Path(uri));
IOUtils.copyBytes(in, System.out, 4096, false);
IOUtils.closeStream(in);
写文件
String dst = "hdfs://master:9000/input/file03";
String src = "c://aa.txt";
InputStream in = new BufferedInputStream(new FileInputStream(src));
Configuration conf = new Configuration();
FileSystem fs = FileSystem.get(URI.create(dst), conf);
OutputStream out = fs.create(new Path(dst));
IOUtils.copyBytes(in, out, 4096, true);
IOUtils.closeStream(in);
删除文件
String dst = "hdfs://master:9000/input/file03";
Configuration conf = new Configuration();
FileSystem fs = FileSystem.get(URI.create(dst), conf);
fs.delete(new Path(dst), true);
分享到:
相关推荐
hdfs api操作.mp4
5、HDFS API的RESTful风格--WebHDFS 网址:https://blog.csdn.net/chenwewi520feng/article/details/130335776 本文简单介绍WebHDFS和使用。
hdfsapi第一个案例(先创建一个包) 解决用户权限问题、获取操作对象的6种方式 以下方法是修改用户权限的操作 权限问题: 解决用户出错的几种方案: vm options: -DHADOOP_USER_NAME=root 2、设置系统环境...
包含翻译后的API文档:hadoop-hdfs-2.7.3-javadoc-API文档-中文(简体)-英语-对照版.zip; Maven坐标:org.apache.hadoop:hadoop-hdfs:2.7.3; 标签:apache、hdfs、hadoop、jar包、java、API文档、中英对照版; 使用...
很详细很简单的入门级操作HDFS文件上传,下载,查看,集群环境等接口API,可以按照代码写和API文档写自己需要的操作HDFS分布式文件系统的功能。
HDFS FS API 本地上传文件至HDFS,HDFS下载文件至本地,在HDFS上新建删除文件夹
包含翻译后的API文档:hadoop-hdfs-2.6.5-javadoc-API文档-中文(简体)版.zip; Maven坐标:org.apache.hadoop:hadoop-hdfs:2.6.5; 标签:apache、hdfs、hadoop、jar包、java、中文文档; 使用方法:解压翻译后的API...
赠送原API文档:hadoop-hdfs-2.9.1-javadoc.jar 赠送源代码:hadoop-hdfs-2.9.1-sources.jar 包含翻译后的API文档:hadoop-hdfs-2.9.1-javadoc-API文档-中文(简体)版.zip 对应Maven信息:groupId:org.apache....
hdfs api,研究hadoop的可以下来参考
hadoop273 hdfs的IO操作API所引用的jar包 在client端可以通过api进行操作hdfs的逻辑文件系统
用于在没有任何 3rd 方 hadoop 插件的情况下使用 HDFS API 的 Java Maven 项目。 项目宗旨 你好世界/教程级别,用于在 OS X 上使用伪分布式 hadoop 配置进行编程操作。优胜美地上的 Hadoop 2.7。 这个项目展示了...
Pydoop是用于的Python MapReduce和HDFS API。 版权所有 。 首先,请看一下 。
Hadoop 3.x(HDFS)----【HDFS 的 API 操作】---- 代码 Hadoop 3.x(HDFS)----【HDFS 的 API 操作】---- 代码 Hadoop 3.x(HDFS)----【HDFS 的 API 操作】---- 代码 Hadoop 3.x(HDFS)----【HDFS 的 API 操作】--...
星环大数据平台HDFS,操作手册,基于星环大数据平台的指导手册,官方培训资料,仅供参考,具体HDFS学习请阅读《hadoop权威指南》
Hadoop Hands on - 一个 POC,涵盖 HDFS API、MapReduce、JSON 和 AVRO SerDe、HBase API 和 FuzzyRowFilter 用法 我的 Hadoop 学习阶段仍在继续。 在这个阶段,我发现非常缺乏一个全面的 POC,它至少涵盖了一些突出...
适合刚接触hadoop的学生或小白,内容包括HDFS shell操作及HDFS Java API编程 有图片有代码
Hadoop 2.2.0 API CHM格式 带索引和全文搜索 一个分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。Hadoop实现了一个分布式...
02--HDFS Java API操作.docx
大数据技术基础实验报告-调用Java API实现HDFS操作
熟练掌握HDFS的Java API接口访问