如何在C++程序的中间写入昂贵的文件I/O

How to write-off an expensive file I/O in the middle of a C++ program

本文关键字:文件 C++ 程序 中间      更新时间:2023-10-16

我正在编写一些性能要求极高的代码(我使用的是微秒计时器!)。问题是,它有一个服务器<->高速共享大量数据的客户端体系结构。为了保持客户端和服务器之间的同步,遵循了一种简单的基于"序列号"的方法。这样,如果客户端的程序崩溃,客户端可以通过向服务器发送最后一个序列号来"恢复"通信,他们可以"恢复操作"而不会错过任何东西。这个问题是我被迫将序列号写入磁盘。遗憾的是,每一笔"交易"都必须这样做。这种文件写入会造成巨大的时间成本(正如我们所预料的那样)。所以我想我应该使用线程来解决这个问题。然而,如果我创建了一个常规线程,我无论如何都必须等到文件写入完成。如果我使用了一个分离的线程,我会做一些有风险的事情,因为当我的实际进程被终止时(比方说),线程可能无法完成,因此序列号会被打乱。

我有什么选择。请注意,遗憾的是,我无法访问C++11。我在linux上使用lpthread。

您只需将数据添加到队列中,然后让辅助线程出列、写入并在完成后发出信号。

您还可以从基于日志的文件系统中获得一些灵感。他们通过让主线程首先将一个小记录写入日志文件,然后立即将控制权返回给程序的其余部分来解决这个问题。同时,辅助线程可以执行实际的数据写入,并通过写入日志文件发出信号。这有助于通过将写入延迟到有更多系统资源可用时来保持吞吐量,并且不会阻塞主线程。点击此处了解更多信息