迭代一个有10000行的mysql结果集,需要3.5秒。这是正常的吗?

时间:2014-07-08 07:35:12

标签: c++ mysql database-performance mysql++

我使用C ++和mysql ++来获取结果集并使用fetch_row()

进行迭代

结果集有10000行,这是"而"循环花了将近3.5秒。(我在while循环中注释了内容。)

这种情况正常吗? 我认为它应该完成得更快!

Connection* conn = ConnPool::getSingletonPtr()->getConn();
Query qr = conn->query(sql);

SYSTEMTIME lpsystime;  
GetLocalTime(&lpsystime);  

UseQueryResult res = qr.use();
while(FryRow row = res.fetch_row())
{
    /*
    MyObject obj;
    for(int i=0; i<row.size(); i++)
    {
        obj.setValue(res.fetch_field(i).name(), row[i]);
    }
    objList->push_back(obj);
    */
}

GetLocalTime(&lpsystime);  

MyObject具有属性:

 int procedureNo;
 int index;
 int employeeNo;
 int procCount;
 int state;
 int procPermission;
 int procDeadline;
 int advanceAlert;
 DateTime procTime;
 int resultFlag;
 string comment;
 int flowDirection;
 int isHideComment;
 int isTrack;
 DateTime arriveTime;
 string preNodesJsonStr;
 string nextNodesJsonStr;
 string attachStr;
 string employeeName;
 DateTime employeeBirthDay;

************************** Spliter ***************** ************ 感谢你们!我修改了代码并再次测量时间:

Connection* conn = ConnPool::getSingletonPtr()->getConn();
Query qr = conn->query(sql);

SYSTEMTIME lpsystime;  
GetLocalTime(&lpsystime);  // get the time before use().

UseQueryResult res = qr.use();

GetLocalTime(&lpsystime);  // get the time before While loop.


while(FryRow row = res.fetch_row())
{
        /*
        MyObject obj;
        for(int i=0; i<row.size(); i++)
        {
            obj.setValue(res.fetch_field(i).name(), row[i]);
        }
        objList->push_back(obj);
        */
}

GetLocalTime(&lpsystime);  // get the time when While loop finished.

use()函数只需10毫秒。

ant While循环花费1.677秒。

如果我没有在Loop中注释掉内容。它的成本为3.386秒。

setValue()函数定义如下:

MyObject::setValue(const char * colName, const mysqlpp::String& ele)
{ 
 if(strcmp(colName,"column010") == 0)
      procedureNo = ele;
 else if(strcmp(colName,"column020") == 0)
      index = ele;
 else if(strcmp(colName,"column030") == 0)
      employeeNo = ele;
 else if(strcmp(colName,"column040") == 0)
      procCount = ele;
 else if(strcmp(colName,"column050") == 0)
      state = ele;
 else if(strcmp(colName,"column060") == 0)
      procPermission = ele;
 else if(strcmp(colName,"column070") == 0)
      procDeadline = ele;
 else if(strcmp(colName,"column080") == 0)
      advanceAlert = ele;
 else if(strcmp(colName,"column090") == 0)
      procTime = ele;
 else if(strcmp(colName,"column100") == 0)
      resultFlag = ele;
 else if(strcmp(colName,"column110") == 0)
      comment = ele;
 else if(strcmp(colName,"column120") == 0)
      flowDirection = ele;
 else if(strcmp(colName,"column130") == 0)
      isHideComment = ele;
 else if(strcmp(colName,"column140") == 0)
      isTrack = ele;
 else if(strcmp(colName,"column150") == 0)
      arriveTime = ele;
 else if(strcmp(colName,"column160") == 0)
      preNodesJsonStr = ele;
 else if(strcmp(colName,"column170") == 0)
      nextNodesJsonStr = ele;
 else if(strcmp(colName,"column180") == 0)
      attachStr = ele;
 else if(strcmp(colName,"column190") == 0)
      employeeName = ele;
 else if(strcmp(colName,"column200") == 0)
      employeeBirthDay = ele;
}

1 个答案:

答案 0 :(得分:2)

您的问题是您还要测量查询的执行时间。 conn->query(sql); 执行查询。它只是构建一个Query对象。然后use方法实际执行查询。即,在您的代码中,该行实际执行查询:

UseQueryResult res = qr.use();

来自mysql ++文档:

 UseQueryResult mysqlpp::Query::use ()  
  

执行一个可以返回行的查询,可以顺序访问行。使用其中一个use()   如果内存效率很重要,则会出现过载他们返回一个物体   可以逐个遍历结果记录,而不需要提取   来自服务器的整个结果集。

但是请注意,即使你拉出use调用,你的循环中仍然会得到一些查询执行时间,因为use逐行拉取行。因此,数据库通过元组执行查询元组,并且只在从结果中获取时才计算下一个元组。如果您真的想要测量所有结果的循环,则必须使用store函数。它彻底执行查询并将结果存储在内存块中。然后,你的循环将非常快。但是,您仍然应该更喜欢use,因为首先将所有结果存储到内存中通常只是浪费时间和内存。