Boost序列化和文件IO非常慢
Boost serialization and file IO is extremely slow
我正在制作一个游戏,并有一个用于加载三维模型的资源文件格式,其中纹理和网格等定义如下:
/* PackageHeader definition */
struct PackageHeader
{
std::string mSignature;
uint8_t mMajorVersion;
uint8_t mMinorVersion;
PackageHeader();
};
/* PackageMesh definition */
struct PackageMesh
{
std::vector<Vec3> mVertexData;
std::vector<Vec3> mNormalData;
std::vector<Vec2> mTexCoordsData;
std::vector<uint32_t> mIndiceData;
uint16_t mMaterialIndex;
bool mHasMaterial;
PackageMesh();
};
/* PackageTexture definition */
struct PackageTexture
{
std::string mName;
std::vector<uint8_t> mTextureData;
uint32_t mTextureWidth; // width/height in pixels
uint32_t mTextureHeight;
ITexture::TextureFormat mTextureFormat;
ITexture::TextureType mTextureType;
PackageTexture();
};
/* PackageMaterial definition */
struct PackageMaterial
{
std::string mName;
PackageTexture mDiffuseTexture;
Vec3 mDiffuseColor;
Vec3 mAmbientColor;
Vec3 mSpecularColor;
Vec3 mEmissiveColor;
PackageMaterial();
};
/* PackageModel definition */
struct PackageModel
{
std::string mName;
std::vector<PackageModel> mChildren;
std::vector<PackageMesh> mMeshes;
Mat4 mTransform;
PackageModel();
};
/* JonsPackage definition */
struct JonsPackage
{
PackageHeader mHeader;
std::vector<PackageModel> mModels;
std::vector<PackageMaterial> mMaterials;
JonsPackage();
};
我正在使用Boost Serialization从文件系统中保存/加载,到目前为止,这个文件系统非常棒,因为它几乎不需要任何代码
然而,在导入一些三维模型,然后尝试再次加载后,加载时间是巨大的;从文件系统加载然后反序列化几乎需要30秒。
这是要序列化/反序列化的代码:
JonsPackagePtr ReadJonsPkg(const std::string& jonsPkgName)
{
std::ifstream jonsPkgStream(jonsPkgName.c_str(), std::ios::in | std::ios::binary); // TODO: support opening of older resource packages
JonsPackagePtr pkg(HeapAllocator::GetDefaultHeapAllocator().AllocateObject<JonsPackage>(), boost::bind(&HeapAllocator::DeallocateObject<JonsPackage>, &HeapAllocator::GetDefaultHeapAllocator(), _1));
if (jonsPkgStream && jonsPkgStream.good() && jonsPkgStream.is_open())
{
std::stringstream buf(std::ios_base::binary | std::ios_base::in | std::ios_base::out);
buf << jonsPkgStream.rdbuf();
buf.seekg(0);
jonsPkgStream.close();
boost::archive::binary_iarchive iar(buf);
iar >> (*pkg.get());
}
jonsPkgStream.close();
return pkg;
}
bool WriteJonsPkg(const std::string& jonsPkgName, const JonsPackagePtr pkg)
{
std::ofstream outStream(jonsPkgName.c_str(), std::ios::out | std::ios::binary | std::ios::trunc);
bool ret = false;
if (outStream.is_open())
{
boost::archive::binary_oarchive oar(outStream);
oar << (*pkg.get());
ret = true;
}
return ret;
}
以下是VS2012性能分析的图像:http://postimg.org/image/smdsnu5gl/
我使用的资源文件在光盘上大约是26MB,包含3个包模型和14个包纹理。我该怎么办呢?我的文件格式设计是一条死胡同吗?
这对于26MB来说时间太长了。我看到你在VS2012中运行它。我建议您在版本中尝试并在VS2012环境之外运行该程序,只需直接从文件资源管理器中单击.exe即可。
此外,您不需要在内存中加载整个文件来反序列化其内容。
您可以尝试使用以下代码:
std::ifstream file("path.dat");
boost::archive::binary_iarchive iar(file);
相关文章:
- Seg Fault Issue C++ (file IO / getline)
- 如何防止 c++ 在从浮点型转换为双精度型(不适用于 IO)时添加额外的小数?
- 为什么在读取文件大小时文件IO速度会发生变化
- OpenGL大的3D纹理(>2GB)非常慢
- 为什么需要复制构造函数,在哪些情况下它们非常有用
- 为什么std::互斥需要很长的、非常不规则的时间来共享
- G++ C++17 类模板参数推导在非常特殊的情况下不起作用
- 使用浮点数和双精度数的非常小数字的数学
- Agora.io 虚幻引擎插件构建错误
- 在打开多个其他窗口时使用全屏窗口时帧速率非常低
- 我从int x[3]得到的一个非常奇怪的输出;
- 反向迭代器在C++中非常奇怪的行为
- 不将数据 socket.io c++(客户端)发送到 nodejs(服务器)socket.io
- ASIO signal_set多个 IO 线程不可靠,具体取决于代码顺序?
- 通过 Tor 服务C++ socket.io 客户端
- 如何使用可视化代码和平台IO将环境变量注入CPP文件?
- 如何读取 google::p rotobuf::io::CodedOutputStream::WriteVarint32
- Conan.io 在编译步骤中或已经在签出时
- 将非常大的 int 转换为双倍,在某些计算机上会损失精度
- Boost序列化和文件IO非常慢