在 Win32 中解析巨大的字符* 缓冲区

Question

>我有一些巨大的csv文件，并尝试读取文件，解析和写入一个数据库。CSV 格式如下：

EUR/USD 20100103 21:27:59.694   1.43067 1.43097
EUR/USD 20100103 21:27:59.732   1.43075 1.43095
EUR/USD 20100103 21:28:08.152   1.43078 1.43099
EUR/USD 20100103 21:28:16.897   1.43076 1.43102
EUR/USD 20100103 21:28:28.757   1.43071 1.43101
EUR/USD 20100103 21:29:07.659   1.43071 1.43106

我C++代码是：

void Read(char* fileName){
  FILE * pFile;
        long lSize;
        char * buffer;
        size_t result;
        pFile = fopen (fileName , "rb" );
        if (pFile==NULL) {fputs ("File error",stderr); exit (1);}
        fseek (pFile , 0 , SEEK_END);
        lSize = ftell (pFile);
        cout<<lSize<<"n";
        rewind (pFile);
        // allocate memory to contain the whole file:
        buffer = (char*) malloc (sizeof(char)*lSize);
        if (buffer == NULL) {fputs ("Memory error",stderr); exit (2);}
        result = fread (buffer,1,lSize,pFile);
        if (result != lSize) {fputs ("Reading error",stderr); exit (3);}
                char * pch;
        pch = strtok (buffer,"n");
        while (pch != NULL) {
            Parsing(pch);
                pch = strtok (NULL, "n");
        }
        free (buffer);
        fclose (pFile);
}
void Parsing(char* tmpp){
    char * pch;
    pch = strtok (tmpp,",");
    char temp[256];
        strcpy(temp, "INSERT INTO dukas  VALUES('" );
    while (pch != NULL) {
        cout<<pch<<"n";
        pch = strtok (NULL, ",");
    }

}

问题是这个文件，只读取第一行，不能移动到第二行。此脚本中有任何错误吗？问候

Answer 1

来自 strtok 上的 MSDN：在单个线程中，交错调用这些函数之一极有可能产生数据损坏和不准确的结果。解析不同字符串时，请先完成对一个字符串的分析，然后再开始解析下一个字符串。

这正是您正在做的事情：您在Parsing函数中有一个strtok读取行，另一个解析字段。