随机读取使用MapViewOffile的文件

randomly reading a file with mapviewoffile

本文关键字:文件 MapViewOffile 读取 随机      更新时间:2023-10-16

我有一个非常大的文件,我想使用CreateFileMapping和MapViewOffile来根据给定的标识符号提取10个字节。所以这是我徒劳的尝试,

char* Read(char*pFilename, int id)
{
    HANDLE hFile = ::CreateFile(pFilename, GENERIC_READ, FILE_SHARE_READ, NULL, OPEN_EXISTING, FILE_ATTRIBUTE_NORMAL, NULL);
    GetSystemInfo(&sysInfo);
    DWORD dwSysGran = sysInfo.dwAllocationGranularity;
    DWORD dwFileMapStart = ((id*10/ dwSysGran)*dwSysGran);
    DWORD dwMapViewSize = (id*10 % dwSysGran) + 10;
    DWORD dwFileMapSize = id*10 + 10;
    char data[10];
    HANDLE hMap = ::CreateFileMapping(hFile, NULL, PAGE_READONLY, 0, dwFileMapSize, NULL);
    if (hMap != NULL)
    {
        char *rawBuffer = (char*)MapViewOfFile(hMap, FILE_MAP_READ, 0, dwFileMapStart, dwMapViewSize);
        memcpy(&data[0], rawBuffer, 10);
        UnmapViewOfFile(rawBuffer);
    }
//...
    return data;
}

例如,如果用户输入一个名为" targeweapondata.ucc"和 an identifier = 122的文件然后,我的程序需要从文件中的1220 th byte开始读取10个字节的文本,然后将其返回以进行进一步处理。

我仅根据我发现的几个资源来编写此代码,直到现在,我还没有对地球到底有什么彻底的了解

_In_     DWORD  dwFileOffsetHigh,
 _In_     DWORD  dwFileOffsetLow,

在这两个功能中确实是指这样做。而且我想我的参数传递到了这些程序中,就像上面的程序中显示不正确。

  1. 在此处使用文件映射的理由很少。打开,寻找和阅读。文件映射不会更快地神奇。

  2. dwFileOffsetHighdwFileOffsetLow合并到"视图"开始的文件中的64位偏移。从不同的偏移开始,您可以对单个文件映射的多个视图进行多个视图。偏移必须是页面大小的倍数。因此,您无法在任何想要的地方开始

  3. dwFileMapSize(高和低是64位值)必须是映射中可用的文件的最大大小。

  4. 磁盘故障和磁盘去除可能会导致(系统)异常。如果您不希望您的程序在这种情况下崩溃,则需要处理。

  5. 请注意,您的偏移规范允许10字节段越过页面边界。您必须确保您的视图伸展两页

您的计算看起来正确,但是您忘记了rawBuffer的视图指向偏移dwFileMapStart而不是id*10

我会尝试这样的事情:

char* Read(char*pFilename, int id)
{
    HANDLE hFile = ::CreateFile(pFilename, GENERIC_READ, FILE_SHARE_READ, NULL, OPEN_EXISTING, FILE_ATTRIBUTE_NORMAL, NULL);
    GetSystemInfo(&sysInfo);
    DWORD dwSysGran = sysInfo.dwAllocationGranularity;
    DWORD dwSize = 10;
    DWORD dwOffset = id*dwSize;
    DWORD dwFileMapStart = ((dwOffset/dwSysGran)*dwSysGran);
    DWORD dwMapViewSize = dwOffset + dwSize - dwFileMapStart;
    char data[10];
    HANDLE hMap = ::CreateFileMapping(hFile, NULL, PAGE_READONLY, 0, 0, NULL);
    if (hMap != NULL)
    {
        char *rawBuffer = (char*)MapViewOfFile(hMap, FILE_MAP_READ, 0, dwFileMapStart, dwMapViewSize);
        memcpy(&data[0], rawBuffer + (dwOffset - dwFileMapStart), dwSize);
        UnmapViewOfFile(rawBuffer);
    }
//...
    return data;
}

(我尚未测试此代码,所以可能有一些错别字。但是它应该给您基本的想法。)

如果文件可能大于4GB,则需要进行64位计算。

请注意,(取决于文件大小和应用程序的位置),维护整个文件的永久映射视图可能比每次需要读取10个字节时创建新的映射更有意义。至少即使您想每次重新映射视图,也要考虑维护永久映射对象;您会发现它大大减少了开销。