高效的文件拷贝之MappedByteBuffer

曾经终败给现在 2023-10-16 22:59 158阅读 0赞

我们经常对文件进行操作，但是效率却一般。最近在研究MappedByteBuffer的用法，下面是例子：

void MappedByteBufferTest() {
        try {
            RandomAccessFile source = new RandomAccessFile("F:\\cmb-flume\\flume\\logs\\relog\\paas0.log", "r");
            RandomAccessFile target = new RandomAccessFile("F:\\cmb-flume\\flume\\logs\\relog\\1.log", "rw");
            FileChannel in = source.getChannel();
            FileChannel out = target.getChannel();
            long size = in.size();
            MappedByteBuffer mbbi = in.map(FileChannel.MapMode.READ_ONLY, 0, size);
            MappedByteBuffer mbbo = out.map(FileChannel.MapMode.READ_WRITE, 0, size);
            long start = System.currentTimeMillis();
            for (int i = 0; i < size; i++) {
                byte b = mbbi.get(i);
                mbbo.put(i, b);
            }
            source.close();
            target.close();
            System.out.println("Spend: " + (System.currentTimeMillis() - start) + "ms");
        } catch (Exception e) {
            // TODO: handle exception
        }
    }

打印：Spend: 170ms

paas0.log的大小是197M，耗时170毫秒，换算一下1毫秒可以读取1.15M。1秒钟的话可以读取1.13G大小的文件。

发表评论取消回复

表情：

评论列表（有 0 条评论，158人围观）

还没有评论，来说两句吧...

相关阅读

相关高效的文件拷贝之MappedByteBuffer

我们经常对文件进行操作，但是效率却一般。最近在研究MappedByteBuffer的用法，下面是例子： void MappedByteBufferTest() {

曾经终败给现在/ 2023年10月16日 22:59/ 0 赞/ 159 阅读

相关 MappedByteBuffer 堆外内存修改文件

MappedByteBuffer在对文件修改时，可以直接在堆外内存对文件修改，不用拷贝到堆内内存去操作。内核空间：包括内核读缓冲区和内核写缓冲区，是运行内核

旧城等待，/ 2022年09月02日 04:26/ 0 赞/ 153 阅读

相关 java NIO零拷贝、顺序读写、MappedByteBuffer

参考文章： https://blog.csdn.net/zhxdick/article/details/81084672 https://blog.csdn.net/zl1

矫情吗；*/ 2022年09月02日 04:26/ 0 赞/ 259 阅读

相关 java nio 之MappedByteBuffer

其实掌握MappedByteBuffer并不难，只要记住“三方三法三特性”（我自己总结的，呵呵~~不要扔鸡蛋哦。。。）这句话就可以轻松搞定！MappedByteBuffer 只

淡淡的烟草味﹌/ 2022年08月27日 03:27/ 0 赞/ 160 阅读

相关 java nio 之MappedByteBuffer，高效文件/内存映射

[MappedByteBuffer][] 是java nio引入的文件内存映射方案，读写性能极高。NIO最主要的就是实现了对异步操作的支持。其中一种通过把一个套接字通道(Soc

曾经终败给现在/ 2022年08月06日 02:11/ 0 赞/ 316 阅读

相关 node之文件拷贝

var fs = require('fs') var readStream = fs.createReadStream('qd1.mp4') var w

àì夳堔傛蜴生んèń/ 2022年05月27日 13:20/ 0 赞/ 146 阅读

相关基于MappedByteBuffer & FileChannel 的大文件读取工具

import java.io.FileInputStream; import java.io.IOException; import java.nio.

╰半夏微凉°/ 2022年01月11日 21:33/ 0 赞/ 160 阅读

相关 MappedByteBuffer内存(堆外)文件映射

在linux中tmpfs是一种可以把内存直接拿来当文件系统使用的一种技术，这一技术也是共享内存/mmap的实现基础。今天我们就来研究一下java中如何使用mmap。从JDK

- 日理万妓/ 2021年09月19日 06:06/ 0 赞/ 478 阅读

相关 java NIO之MappedByteBuffer

java io操作中通常采用BufferedReader，BufferedInputStream等带缓冲的IO类处理大文件，不过java nio中引入了一种基于MappedBy

墨蓝/ 2021年06月24日 15:57/ 0 赞/ 591 阅读

相关深入浅出MappedByteBuffer

java io操作中通常采用BufferedReader，BufferedInputStream等带缓冲的IO类处理大文件，不过java nio中引入了一种基于Mappe...

灰太狼/ 2021年01月24日 17:53/ 0 赞/ 650 阅读