Question

java读取大文件，采用多线程处理对提高效率可有帮助？

Answer 1

如果只是单纯的读文件，一个线程足够了，因为一般瓶颈是在磁盘io上，多个线程只会在磁盘io上阻塞。
但是一般是读一小块做一次处理，然后再读下一块，这样只用一个线程磁盘io有空闲的时间，就可以用多线程处理，有的线程在读数据有的线程在处理数据。而且磁盘是有缓存的，一次读48行，可能会缓存后面的1m内容，下n次其他线程来读的时候磁盘可以直接从缓存中取数据。估计线程数不会超过10个，太多线程仍然会阻塞在磁盘io上。但是随机读取文件无法利用缓存机制，而且硬盘不断的重新定位会花费大量的寻道时间，估计效率还比不上多个线程用同一个指针顺序读取文件。理论推测，具体还是得自己写程序跑一下。
java总是倾向于用多线程，很少接触到不同进程的通信，只用过socket通信。

作者：李宏训
链接：http://www.zhihu.com/question/20149395/answer/14136499
来源：知乎
著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。