内容简介:HDFS 客户端写流程:
写流程
HDFS 客户端写流程:
-
客户端连接 NameNode 请求打开写入文件,NameNode 创建文件元数据。此时,并没有与文件元数据相对应的数据块。
-
客户端向 NameNode 请求复制管道(Replication Pipeline),并向管道中的第一个 DataNode 写入数据。
-
复制管道中的第一个 DataNode 又将数据复制到管道下一个 DataNode。
-
关闭文件。
Java API
public static void write(String path, String content) {
Configuration conf = new Configuration();
try (FileSystem fs = FileSystem.get(new URI("hdfs://nameservice1"), conf, "hdfs")) {
Path p = new Path(path);
if (!fs.exists(p)) {
try (FSDataOutputStream out = fs.create(p)) {
out.write(content.getBytes(Charsets.UTF_8));
}
} else {
// 文件已存在
logger.warn("文件 {} 已存在", path);
}
} catch (URISyntaxException | InterruptedException | IOException e) {
logger.error("写文件错误", e);
throw new RuntimeException(e);
}
}
以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持 码农网
本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们。
精通JavaScript+jQuery
曾顺 编著 / 人民邮电出版社 / 2008-9 / 59.00元
随着Ajax技术的不断风靡,其核心技术JavaScript越来越受到人们的关注,各种JavaScript的框架层出不穷。jQuery作为JavaScript框架的优秀代表,为广大开发者提供了诸多便利。 本书从介绍JavaScript的基础知识开始,围绕标准Web的各项技术予以展开,通过大量实例对JavaScript、CSS、DOM、Ajax等 Web关键技术进行深入浅出的分析,主要内容包括J......一起来看看 《精通JavaScript+jQuery》 这本书的介绍吧!