逐个编写大型二进制文件

时间:2013-07-02 20:38:10

标签: c file-io

我正在尝试做一个相当容易的任务,但我对FILE *的工作原理感到困惑。所以我正在写一个二进制文件(las文件),它有一个标题,然后是二进制格式的点。由于这是一个巨大的文件,我正在逐个进行。但问题来自文件指针正确写入文件的大约3/4然后给出完全错误的文件位置指针。

//struct points written to 
struct las_points{
    float x;
    float y;
    float z;
    float time;
};
int writepoints(){
     outfilename = "pointcloud_13.las";
     fout = fopen(outfilename,"wb+");
     // numPts - total number of points to be processed
     // numRec - number of records processed every time
     numRec = numPts/4;
     las_points *lp;
     // ending size of the file
     int endSize = 0,j=0;
     // header is written 
     // endSize = 233
     for(i=0;i<numPts;i+=numRec){
        lp = (las_points*)malloc(sizeof(las_points)*numRec);
        // some processing done 
        printf("Iteration - %d\n",j);
        lasWritePoints(lp,fout,numRec,endSize);
        fflush(fout);
        free(lp);
        lp = NULL;
     }
     fclose(fout);
}
int lasWritePoints(las_points*lp, FILE* fout,int numRec,int &endSize){
     if(!fout || !lp){
          printf("File couldnt be written \n");
          exit(1);
     }
     printf("endSize - %d \n",endSize);
     fseek(fout,endSize,SEEK_SET);
     for(int i=0;i<numRec;i++) {
         fwrite(&lp[i].x,sizeof(float),1,fout);
         fwrite(&lp[i].y,sizeof(float),1,fout);
         fwrite(&lp[i].z,sizeof(float),1,fout);
         fseek(fout,8,SEEK_CUR);
         fwrite(&lp[i].time,sizeof(float),1,fout);
     }
     endSize = ftell(fout);
     printf("endSize - %d \n",endSize);
}

仅再现二进制文件的写入。问题是,对于文件的前四次迭代,它运行顺利。然后在最后一次迭代结束时,它给出的endSize小于开始的endSize。

 Output:
 Total size of file to be read: 1258456752
 Iteration : 0
 endSize : 233
 endSize : 550575041
 Iteration : 1
 endSize : 550575041
 endSize : 1101149849
 Iteration : 2
 endSize : 1101149849
 endSize : 1651724657
 Iteration : 3
 endSize : 1651724657
 endSize : 54815783

有人可以指出我做错了吗?

3 个答案:

答案 0 :(得分:1)

您写的字节数多于32位int(约20亿= 2 GB)。使用long存储ftell()的结果:

long endSize = ftell(fout);
printf("endSize - %ld\n", endSize);

答案 1 :(得分:0)

您可能会遇到32位版本的文件访问功能。您使用什么平台/编译器/文件系统?

如果你在:

  • Linux使用gcc尝试将-D_FILE_OFFSET_BITS = 64添加到编译器命令
  • 使用mingw的Windows尝试使用fseeko和ftello
  • 使用Visual C ++的32位Windows尝试使用_open(不是替代品)
  • 文件系统,文件大小限制为2GB,然后是我的哀悼

答案 2 :(得分:0)

您需要取消引用endSize

您正在将文件大小/位置指定给指针,从而导致意外行为。

endSize = ftell(fout);

S / B

*endSize = ftell(fout);

这是C中最常见的错误之一。