Deeplearning4j模型保存至HDFS

Myth丶恋晨 2022-06-01 04:47 168阅读 0赞

# Deeplearning4j模型保存至HDFS #

--------------------

Deeplearning4j支持训练出来的网络模型存储在HDFS上：  
![QQ截图20180118131217.png-60.1kB][QQ_20180118131217.png-60.1kB]

上面示例图中的代码不是很全，这里进行简易补全

需要引入的HDFS的包如下:

import org.apache.hadoop.conf.Configuration;
    import org.apache.hadoop.fs.FSDataOutputStream;
    import org.apache.hadoop.fs.FileSystem;
    import org.apache.hadoop.fs.Path;

接下来就是需要初始化hdfs，以及创造输出流等等

Configuration conf = initializeConf();
    FileSystem hdfs = FileSystem.get(conf);
    //路径
    Path modelPath = new Path(hdfsPathToSaveModel);
    OutputStream os = hdfs.create(modelPath);
    BufferedOutputStream stream = new BufferedOutputStream(os);
    ModelSerializer.writeModel(tranedNetwork, stream, true);

> HDFS路径通常写为 hdfs:///path/to/save/model.zip

--------------------

更多文档可以查看 [https://github.com/sjsdfg/deeplearning4j-issues][https_github.com_sjsdfg_deeplearning4j-issues]。  
欢迎star

[QQ_20180118131217.png-60.1kB]: /images/20220601/ea592d0f96e94388b94a36aa328b08b6.png
[https_github.com_sjsdfg_deeplearning4j-issues]: https://github.com/sjsdfg/deeplearning4j-issues

发表评论取消回复

表情：

评论列表（有 0 条评论，168人围观）

还没有评论，来说两句吧...

相关阅读

相关在Deeplearning4j中使用cuDNN

在Deeplearning4j中使用cuDNN Deeplearning4j支持cuda，但是也支持使用cuDNN实现更进一步的加速。自从版本0.9.1之后，CNNs和L

逃离我推掉我的手/ 2022年06月02日 10:36/ 0 赞/ 190 阅读

相关 deeplearning4j梯度标准化策略

deeplearning4j梯度标准化策略 deeplearning4j一共提供了如下策略： package org.deeplearning4j.nn.con

╰+攻爆jí腚メ/ 2022年06月02日 05:17/ 0 赞/ 208 阅读

相关 Deeplearning4j分布式训练：梯度共享

Deeplearning4j分布式训练：梯度共享 0.9.1版本（或0.9.2-SNAPSHOT）起，DeepLearning4j开始支持Apache Spark环境中的

雨点打透心脏的1/2处/ 2022年06月01日 08:39/ 0 赞/ 262 阅读

相关 Deeplearning4j模型保存至HDFS

Deeplearning4j模型保存至HDFS -------------------- Deeplearning4j支持训练出来的网络模型存储在HDFS上： ![

Myth丶恋晨/ 2022年06月01日 04:47/ 0 赞/ 169 阅读

相关 DeepLearning4j-使用Java训练YOLO模型

DeepLearning4j-使用Java训练YOLO模型在这个Yolo v3发布的大好日子。 Deeplearning4j终于迎来了新的版本更新`1.0.0-al

ゞ浴缸里的玫瑰/ 2022年05月27日 03:24/ 0 赞/ 1625 阅读

相关 Deeplearning4j - ND4j方法快速索引

Deeplearning4j - ND4j方法快速索引 ND4J和ND4S是JVM的科学计算库，并为生产环境设计，亦即例程运行速度快，RAM要求低。主要特点：

心已赠人/ 2022年05月26日 09:51/ 0 赞/ 186 阅读

相关 Deeplearning4j - 使用nd4j导入tensorflow模型

Deeplearning4j - 使用nd4j导入tensorflow模型在dl4j-example里面新增了模型导入的例子，这里简单的说一下。 ----------

傷城~/ 2022年05月26日 00:05/ 0 赞/ 206 阅读

相关 Deeplearning4j - 入门视频

Deeplearning4j - 入门视频 DeepLearning4J（DL4J）是一套基于Java语言的神经网络工具包，可以构建、定型和部署神经网络。DL4J与Had

Myth丶恋晨/ 2022年05月23日 12:42/ 0 赞/ 200 阅读

相关 DeepLearning4j实战1--ND4J矩阵操作

ND4J maven安装DL4J 创建矩阵矩阵运算--拼接矩阵运算-加减矩阵运算-乘除

谁借莪１个温暖的怀抱￠/ 2022年04月04日 11:53/ 0 赞/ 230 阅读

相关 DeepLearning4j - INDArray 转为图像

三通通道彩色图代码引自：[https://github.com/sjsdfg/dl4j-tutorials/blob/master/src/main/java/styl

痛定思痛。/ 2022年03月27日 08:10/ 0 赞/ 274 阅读