Question

java处理大数据，频繁IO读写

现有10个左右的文件，单个文件在几百兆到10G不等。每个数据文件中有几十万不等的数据包，每个数据包的长度不等，且有一个标识。现在要按数据包的标识拆分成单个小文件，只能按字节读取。电脑硬件为xp，4G内存

Answer 1

多线程会嘛

追问

首先数据包长度不定，所以不能对单个文件使用多线程。其次，在文件处理时内存和处理器使用都较高，所以还是不能每个文件开一个线程