java 怎么读取多个txt文件

Question

如题所述

Answer 1

在Java中，使用NIO（New I/O）可以高效地读取大文件。例如，有一个20GB的文件，通过NIO可以将其分割成多个较小的文件，然后逐个读取。下面是一个简单的示例代码：

首先，我们需要导入必要的类，包括FileInputStream、FileChannel、FileOutputStream、ByteBuffer等。这些类用于处理文件的读写操作。

接下来，我们定义一个主类ReadLargeTextWithNIO，并在其中实现所需的功能。代码如下：

java

import java.io.FileInputStream;

import java.io.FileOutputStream;

import java.io.IOException;

import java.nio.ByteBuffer;

import java.nio.channels.FileChannel;

public class ReadLargeTextWithNIO {

public static void main(String args[]) throws IOException {

FileInputStream fin = new FileInputStream("C:\\TDDOWNLOAD\\query.log.td");

FileChannel fcin = fin.getChannel();

ByteBuffer buffer = ByteBuffer.allocate(1024 * 1024 * 50);

while(true) {

buffer.clear();

int flag = fcin.read(buffer);

if(flag == -1) {

break;

}

buffer.flip();

FileOutputStream fout = new FileOutputStream("d:\\temp\\" + Math.random() + ".log");

FileChannel fcout = fout.getChannel();

fcout.write(buffer);

System.out.println(buffer);

}

}

}

在这个示例中，我们使用FileInputStream打开指定的文件，并通过FileChannel获取文件的读取通道。然后，我们创建一个ByteBuffer用于存放读取的数据。

在读取过程中，我们不断清空并重新填充ByteBuffer，直到文件结束。当读取到文件末尾时，会返回-1，此时结束循环。

对于每一块读取的数据，我们都会创建一个新的FileOutputStream和FileChannel，并将数据写入到临时文件中。这里使用Math.random()生成随机文件名，确保每次分割后的文件名不会重复。

最后，通过循环处理整个文件，最终可以将大文件分割成多个较小的文件，便于后续处理。