Question

linux下 多线程共享数据问题

环境：linux64位服务器

现有海量文件（按秒级的时间顺序源源不断的来），我需要起多线程读取这些文件，并利用文件内容构建一个比较庞大的数据结构（各种map、list的组合），另外还有一批线程检测这个数据结构某些位置的值并触发具体的任务（当然也可以在构建数据结构的同时进行触发）。

问题是：
1。多线程如何并发的构建这个数据结构（结构中的list是需要按照文件到来时间排序的），要对数据结构里面的所有数据都上锁么？上锁上在哪？能不上锁么？
2。如何并行的对这个数据结构进行插入和读取
3。其他还需要注意什么？

Answer 1

1,你可以设一个缓冲区,所有读取线程把读取的文件内容放在这个缓冲区内.另设一个专门用来建立数据库的线程.从这个缓冲区内读文件并写入数据库.
上锁的地方不应该在在数据上.那样太没效率,很浪费资源.只要在执行向缓冲区写内容的地方同步控制即可.
2,不清楚.这个太复杂了.我不知道.不过如果是并发的插入和读取的话只要在I/O操作时同步即可.
3....- -

Answer 2

请问你的问题解决了没？我也遇到同样的问题，求解决...

Answer 3

没学过 ！！偶偶