HDFS Java API介绍

蔚落 2023-10-07 16:31 88阅读 0赞

Hadoop整合了众多文件系统，HDFS只是这个文件系统的一个实例。HDFS Java API主要包如下所示：

org.apache.hadoop.fs.FileSystem：它是通用文件系统的抽象基类，可以被分布式文件系统继承，它具有许多实现类，例如：LocalFileSystem、DistributedFileSystem、FtpFileSystem等。

1.org.apache.hadoop.fs.FileStatus：它用于向客户端展示系统中文件和目录的元数据，具体包含文件大小、块大小、副本信息、修改时间等。

2.org.apache.hadoop.fs.FSDataInputStream：文件输入流，用于读取Hadoop文件。

3.org.apache.hadoop.fs.FSDataOutputStream：文件输出流，用于写Hadoop文件。

4.org.apache.hadoop.conf.Configuration：访问配置项，默认配置参数在core-site.xml中，用户可以添加相应的配置参数。

5.org.apache.hadoop.fs.Path：用于表示Hadoop文件系统中的一个文件或者一个目录的路径。

在Java中操作HDFS，首先需要创建一个客户端实例，主要涉及以下类：

Configuration：该类的对象封装了客户端或者服务器的配置，每个配置选项是一个键值对，通常情况下，Configuration实例会自动加载HDFS的配置文件core-site.xml，从中获取Hadoop集群的配置信息。

FileSystem：该类的对象是一个文件系统对象，通过该对象的一些方法可以对文件进行操作FileSystem常用方法：
在这里插入图片描述
小提示：

Hadoop API非常庞大，读者可以通过Hadoop官方文档自行查阅学习，地址如下：Hadoop官方文档地址

史上最全面的Hadoop入门教程

发表评论取消回复

表情：

评论列表（有 0 条评论，88人围观）

还没有评论，来说两句吧...

相关阅读

相关使用Java API操作HDFS

> 提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录学习目标（一）了解HDFS Java API 1、HDFS常见

素颜马尾好姑娘i/ 2024年03月30日 09:02/ 0 赞/ 136 阅读

相关 HDFS Java API介绍

Hadoop整合了众多文件系统，HDFS只是这个文件系统的一个实例。HDFS Java API主要包如下所示： org.apache.hadoop.fs.FileSystem

蔚落/ 2023年10月07日 16:31/ 0 赞/ 89 阅读

相关 HDFS-JAVA API操作

![format_png][] “师傅领进门，修行靠

不念不忘少年蓝@/ 2023年06月27日 12:40/ 0 赞/ 139 阅读

相关 HDFS介绍

文章目录 1. HDFS 副本存放机制 2. HDFS数据写入流程 3. HDFS数据读取流程 4. HDFS数据完整性 5. HDFS适用

拼搏现实的明天。/ 2023年05月29日 05:27/ 0 赞/ 50 阅读

相关 HDFS Shell / Java API操作

本文目录 1.HDFS Shell操作 1.1 基本语法 1.2 常用命令 1）查看Hadoop支持的命令

系统管理员/ 2022年12月19日 13:11/ 0 赞/ 290 阅读

相关基于Java API操作HDFS

目录一、基于Maven环境构建工程二、基于Java API操作HDFS配置三、基于Java API 读取或上传HDFS文件内

心已赠人/ 2022年12月12日 15:29/ 0 赞/ 204 阅读

相关 java api 远程访问hdfs

本文转载自：[http://blog.csdn.net/fangyunfeng/article/details/48508927][http_blog.csdn.net_fan

忘是亡心i/ 2022年07月15日 00:25/ 0 赞/ 284 阅读

相关使用java api操作hdfs

参考: https://blog.csdn.net/jiecxy/article/details/78011630 1. 首先创建一个maven项目，添加如下的hadoop-

小灰灰/ 2022年05月27日 10:18/ 0 赞/ 303 阅读

相关 Hadoop HDFS JAVA API 实战

JAVA API 远程调用Hadoop 通过java Api远程调用Hadoop，实现上传文件，下载文件，删除文件等功能。第一步在pom.xml文件上添加依赖

怼烎@/ 2022年05月16日 14:25/ 0 赞/ 310 阅读

相关 HDFS介绍

Overwiew HDFS是一个文件系统，用于存储文件，通过目录树来定位文件。它是分布式的，有分多服务器联合起来实现其功能。使用场景适合一次写入，多次读出

偏执的太偏执、/ 2021年09月18日 04:02/ 0 赞/ 458 阅读