java高效文件流读写操作详解

所属分类: 软件编程 / java 阅读数: 43
收藏 0 赞 0 分享

导语

防止自己以后忘记,记录一些文件流的性能对比。

平常经常会操作到文件读写,java当中提供了许多操作文件的类,一般来说,文件操作也叫流操作,可以按照以下方式分类:

  • 按照功能分类,字节流和字符流。
  • 按照节点流和过滤流,节点流直接操作文件,过滤流包装了节点流和过滤流。如FileInputStream和BufferedFileInputStream就是分别是节点流和过滤流。

文件流比较

下面重点比较我们经常用的几个流

(1) DataInputStream+FileInputStream

(2) DataInputStream+BufferedInputStream

(3) BufferedReader+FileReader(缓冲流大小不同性能也不同,如1K和8K)

(4) BufferedFileReader

先贴结论:

耗时对比为:

(4)优于(3)—8096优于(3)-1024优于(2)<(1)

另外,BufferedFileReader如果涉及到读取文件的每一行内容还可以在优化,传统的代码如下所示:

BufferedFileReader in = new BufferedFileReader(); 
for (int i=0; i < nargs; i++) { 
 try { 
  in.open(args[i]); 
  while ((line = in.readLine()) != null) { 
   nlines++; 
  } in.close(); 
} catch (Exception e) { 
 System.out.println(" BFRTest: exception:" + e ); 
}

代码中第5行,BufferedReader首先生成一个StringBuffer,然后转成一个String返回,这里涉及到两次字符拷贝。假设读取10000行,会有10000个临时的String对象生成,内存比较耗费,由于BufferedReader的缓冲流是私有的,因此这里的优化点是可以自己管理缓冲流。最佳的读文件的方法代码如下:

  FileReader fr;
  int nlines = 0;
  char buffer[] = new char[8192 + 1];
  int maxLineLength = 128;

  //assumes no line is longer than this
  char lineBuf[] = new char[maxLineLength];
  for (int i = 0; i < nargs; i++) {
   try {
    fr = new FileReader(args[i]);

    int nChars = 0;
    int nextChar = 0;
    int startChar = 0;
    boolean eol = false;
    int lineLength = 0;
    char c = 0;
    int n;
    int j;

    while (true) {
     if (nextChar >= nChars) {
      n = fr.read(buffer, 0, 8192);
      if (n == -1) { // EOF
       break;
      }
      nChars = n;
      startChar = 0;
      nextChar = 0;
     }

     for (j = nextChar; j < nChars; j++) {
      c = buffer[j];
      if ((c == '\n') || (c == '\r')) {
       eol = true;
       break;
      }
     }
     nextChar = j;

     int len = nextChar - startChar;
     if (eol) {
      nextChar++;
      if ((lineLength + len) > maxLineLength) {
       // error
      } else {
       System.arraycopy(buffer, startChar, lineBuf, lineLength, len);
      }
      lineLength += len;

      //
      // Process line here
      //
      nlines++;

      if (c == '\r') {
       if (nextChar >= nChars) {
        n = fr.read(buffer, 0, 8192);
        if (n != -1) {
         nextChar = 0;
         nChars = n;
        }
       }

       if ((nextChar < nChars) && (buffer[nextChar] == '\n'))
        nextChar++;
      }
      startChar = nextChar;
      lineLength = 0;
      continue;
     }

     if ((lineLength + len) > maxLineLength) {
      // error
     } else {
      System.arraycopy(buffer, startChar, lineBuf, lineLength, len);
     }
     lineLength += len;
    }
    fr.close();
   } catch (Exception e) {
    System.out.println("exception: " + e);
   }

NIO文件流

FileChanel介绍

通道,之前流是单向的,而通道是双向的,既可以读,也可以写。读取文件效率参考这里

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持脚本之家。

更多精彩内容其他人还在看

浅谈spring注解之@profile

这篇文章主要介绍了浅谈spring注解之@profile,@profile通过配置来改变参数,这里整理的详细的用法,有兴趣的可以了解一下
收藏 0 赞 0 分享

Java this 关键字的使用方法详解

这篇文章主要介绍了Java this 关键字的使用方法详解的相关资料,希望通过本文能帮助到大家,让大家彻底理解掌握这部分内容,需要的朋友可以参考下
收藏 0 赞 0 分享

Java super关键字的使用方法详解

这篇文章主要介绍了Java super关键字的使用方法详解的相关资料,希望通过本文能帮助到大家,让大家对super关键字彻底掌握,需要的朋友可以参考下
收藏 0 赞 0 分享

springboot整合redis进行数据操作(推荐)

springboot整合redis比较简单,并且使用redistemplate可以让我们更加方便的对数据进行操作。下面通过本文给大家分享springboot整合redis进行数据操作的相关知识,感兴趣的朋友一起看看吧
收藏 0 赞 0 分享

java实现简单解析XML文件功能示例

这篇文章主要介绍了java实现简单解析XML文件功能,结合实例形式分析了java针对xml文件的读取、遍历节点及输出等相关操作技巧,需要的朋友可以参考下
收藏 0 赞 0 分享

Spring Java-based容器配置详解

这篇文章主要介绍了Spring Java-based容器配置详解,涉及注解和@Configuration类以及@Beans的相关知识,具有一定参考价值,需要的朋友可以了解。
收藏 0 赞 0 分享

java实现MD5加密的方法小结

这篇文章主要介绍了java实现MD5加密的方法,结合具体实例形式总结分析了java实现md5加密的常用操作技巧与使用方法,需要的朋友可以参考下
收藏 0 赞 0 分享

使用maven运行Java Main的三种方法解析

这篇文章主要介绍了使用maven运行Java Main的三种方式的相关内容,具有一定参考价值,需要的朋友可以了解下。
收藏 0 赞 0 分享

javaweb设计中filter粗粒度权限控制代码示例

这篇文章主要介绍了javaweb设计中filter粗粒度权限控制代码示例,小编觉得还是挺不错的,需要的朋友可以参考。
收藏 0 赞 0 分享

java 流操作对文件的分割和合并的实例详解

这篇文章主要介绍了java 流操作对文件的分割和合并的实例详解的相关资料,希望通过本文能帮助到大家,让大家理解掌握这部分内容,需要的朋友可以参考下
收藏 0 赞 0 分享
查看更多