如何使用写入时复制来最小化 C++ 程序的内存消耗
How to minimize memory consumption of c++ program using copy-on-write?
我正在开发一个应用程序,该应用程序最多分叉 8 次以实现并行性。每个分叉都有分叉时原始进程的内存空间的完整副本。分叉很快,因为 Linux 在进程之间共享页面,并且仅在修改时创建新页面。实际上,对于我的应用程序来说,内存消耗的增长似乎约为 3 倍。对用于识别将减少这种增长的变化的工具或技术有什么建议吗?
一个想法是查看修改页面的页面碎片。还有对分叉进程中分配的内容的暴力检查。无论哪种情况,您都可以推荐哪些技术或工具来执行该分析?
请记住,即使使用并行性,该程序也需要几个小时才能完成,并且内存占用高达 1TB,因此检测选项有限。
您可以使用vmstat
、systemtap
和/或glibc
的malloc-hooks
来监视消耗。您可以使用perf
查看故障发生的位置,以了解消耗的实际影响。
如果您的应用程序在使用大型内存池时面临 TLB 压力(例如,您正在流式传输大量数据),则可以使用大/大页面来减轻 4k 页面的开销。
您还可以使用 madvise
从进程中告诉内核您可能要对分配的内存执行的操作。
相关文章:
- Mongodb c++驱动程序:如何查询元素的数组
- C++,系统无法执行指定的程序
- 在C++程序中输入的文本文件将不起作用,除非文本被复制和粘贴
- 在VS代码中交叉编译Windows与Linux上的MinGW的SDL程序
- C++ Windows 驱动程序MSB3030无法复制该文件,因为它找不到
- 重载操作程序时出错>>用于类中的字符串 memebr
- 获取日期异步信号安全吗?如果在信号处理程序中使用,它会导致死锁吗
- 试图在visual studio上用C++创建一个桌面应用程序
- 模板元程序查找相似的连续类型名称
- FFmpeg:制作一个应用程序比直接使用ffmepg更好吗
- 如何通过cpp程序运行shell脚本
- 有没有什么方法可以使用一个函数中定义的常量变量,也可以由c++中同一程序中的其他函数使用
- IPC使用多个管道和分支进程来运行Python程序
- 如何将c++程序的一些输出传递给shell,以便在shell中使用
- 使用C++程序合并排序没有得到正确的输出
- 基于boost的程序的静态链接——zlib问题
- 程序崩溃并显示"std::out_of_range"错误
- 在C应用程序中运行C++(带有STL)函数
- 使用mongocxx驱动程序时包含头文件问题
- 如何在c++程序中找到函数的地址