使用c++在文件中同时写入

Simultaneous writing in a file using c++

本文关键字:c++ 文件 使用      更新时间:2023-10-16

如何在不锁定文件的情况下从多个线程同时写入文件。我尝试了共享的读写方法。这种方法的问题是,要在文件上写入,我需要锁定。所以有人能帮我找到一个不用带锁的解决方案吗。

由于并行写入从性能角度来看是有益的,这是非常罕见的(特别是,写入大块数据通常会降低性能),一种解决方案可能是拥有一个单独的写入线程,带有某种要写入的数据包队列,其中多个线程可以添加到队列中,而只有一个线程从队列中读取并写入文件。

当然,现在您可能需要在队列中锁定。有一些多个无写锁定队列(但通常不是严格意义上的"无等待",只是没有大锁,而是在循环中使用比较交换或类似方法来确保写入正确的数据)。此外,将数据复制到队列中的锁定比将数据写入文件所需的时间短得多。

您可能需要对队列进行流控制("如果队列有超过X个字节要写,请等待"或类似的操作),这样您就不会有十几个线程以最快的速度将新数据写入文件,并最终填充所有可浏览的内存,但只有当您有很好的机会同时写入多个线程时,才需要这样做。

总是从多个线程同时写入一个文件会导致无法检测的行为。文件可能已损坏或应用程序可能崩溃。

两种选择:

  • 用于写入的单个写入线程
  • 选择Lock

在最坏的情况下,你可以尝试采取独家锁定。如果你有独家锁定,那么你可以写。否则,循环直到获得EXCLUSIVE锁。