所以我再次遇到了一个我无法通过的障碍! 我正在尝试解析,为OpenGL加载一个obj文件!
我成功但速度很慢(使用ifstream) 所以我现在对文件进行内存映射并从那里进行解析(非常快速地加载到内存中!)。
问题是我无法弄清楚即使在解析它时如何保持速度!
当前代码:
HANDLE file = CreateFile((LPCSTR)loc.c_str(), GENERIC_READ, 0, NULL, OPEN_EXISTING, FILE_ATTRIBUTE_NORMAL, NULL);
if(file == INVALID_HANDLE_VALUE) { /* Error handling code! */ }
HANDLE file2 = CreateFileMapping(file, NULL, PAGE_READONLY, NULL, NULL, (LPCSTR)"CurrentParsingOBJ");
VOID* mappedData = MapViewOfFile(file2, FILE_MAP_READ, 0, 0, NULL);
const char* data = new(mappedData) char[];
int i = 0;
bool v = false, vn = false, vt = false;
while(*(data + i) != '\0')
{
if(*(data + i) == '\n') { v = false; vn = false; vt = false; ++i; continue; }
if((*(data + i) == 'v' && *(data + i + 1) == ' ') || v)
{
int a = 0;
int p = 0;
int pp = 0;
v = true;
}
++i;
}
//Free Mapped Data!
if(UnmapViewOfFile(mappedData) == NULL) { /* Error handling code! */ }
mappedData = NULL;
data = NULL;
到目前为止这是非常好的速度! 但我无法弄清楚如何解析它并保持速度! 我尝试了很多解决方案,但所有这些都导致了无法接受的速度!
这就是我使用ifstream的方式(我想在内存映射版本中加载相同的OBJData结构!):
std::ifstream stream(loc);
if(stream.is_open())
{
for(std::string line; std::getline(stream, line);)
{
if( StringUtil::StringStartsWith(line, "v " ) )
{
Vector3f vec = Vector3f((float)atof((StringUtil::Split(line, ' ')[1])->c_str()), (float)atof((StringUtil::Split(line, ' ')[2])->c_str()), (float)atof((StringUtil::Split(line, ' ')[3])->c_str()));
d->V.push_back(vec);
}else if( StringUtil::StringStartsWith(line, "vn " ) )
{
Vector3f vec = Vector3f((float)atof((StringUtil::Split(line, ' ')[1])->c_str()), (float)atof((StringUtil::Split(line, ' ')[2])->c_str()), (float)atof((StringUtil::Split(line, ' ')[3])->c_str()));
d->VN.push_back(vec);
}else if( StringUtil::StringStartsWith(line, "vt ") )
{
Vector3f vec = Vector3f((float)atof((StringUtil::Split(line, ' ')[1])->c_str()), (float)atof((StringUtil::Split(line, ' ')[2])->c_str()), 0.0F);
d->VT.push_back(vec);
}else if( StringUtil::StringStartsWith(line, "f ") )
{
Vector3f vert = Vector3f( (float)atof(StringUtil::Split( StringUtil::Split(line, ' ')[1]->c_str(), '/' )[0]->c_str()), (float)atof(StringUtil::Split( StringUtil::Split(line, ' ')[2]->c_str(), '/' )[0]->c_str()), (float)atof(StringUtil::Split( StringUtil::Split(line, ' ')[3]->c_str(), '/' )[0]->c_str()) );
Vector3f norms = Vector3f( (float)atof(StringUtil::Split( StringUtil::Split(line, ' ')[1]->c_str(), '/' )[2]->c_str()), (float)atof(StringUtil::Split( StringUtil::Split(line, ' ')[2]->c_str(), '/' )[2]->c_str()), (float)atof(StringUtil::Split( StringUtil::Split(line, ' ')[3]->c_str(), '/' )[2]->c_str()) );
Vector3f textures = Vector3f( (float)atof(StringUtil::Split( StringUtil::Split(line, ' ')[1]->c_str(), '/' )[1]->c_str()), (float)atof(StringUtil::Split( StringUtil::Split(line, ' ')[2]->c_str(), '/' )[1]->c_str()), (float)atof(StringUtil::Split( StringUtil::Split(line, ' ')[3]->c_str(), '/' )[1]->c_str()) );
d->F.push_back(OBJFace(vert, norms, textures));
}
}
}else { /* Error handling code! */ }
stream.close();
对于较大的物品,上述版本需要长达1分钟!
所以我的问题:我如何解析"内存映射版本"在最短的时间内!并加载与较慢版本相同的OBJData结构!
答案 0 :(得分:-1)
如果您正在解析许多和/或大型文件,或者如果您是第一次解析文件,那么您很可能是I / O绑定并且预取可能有所帮助。例如,您可能希望启动一个跨越内存映射文件的并行线程,以便从磁盘中获取它。在C ++ 11中(未经测试):
std::thread prefetch ([data,size]() {
volatile char sink = 0; // Volatile should prevent the compiler from optimizing away.
for (char* pt = data, end = data + size; pt < end; pt += 1024) sink = *pt;
});
// ... Your parser here ...
prefetch.join();
(Linux有MAP_POPULATE flag预取映射。)