DataTable到CSV

时间:2013-02-14 19:45:41

标签: .net csv datatable

这个问题与解析CSV无关。

使用以下代码从DataTable创建CSV 但它很慢 100行乘14列是4秒
有更快的方法吗?

StringBuilder sb = new StringBuilder();
bool first = true;
int colCount = 0;
foreach (DataColumn dc in DT.Columns)
{
    if (first) first = false; else sb.Append(",");
    sb.Append("\"" + dc.ColumnName +  "\"");
    colCount++;
}
sb.AppendLine();
foreach (DataRow dr in DT.Rows)
{  
    first = true;
    for (int i = 0; i < colCount; i++)
    {
        if (first) first = false; else sb.Append(",");
        sb.Append("\"" + dr[i].ToString().Trim() + "\"");
    }
    sb.AppendLine();
}
return sb.ToString();

StringBuilder不是问题。
在300毫秒内将i从0到100万次运行

StringBuilder sb = new StringBuilder();
Stopwatch sw = new Stopwatch();
sw.Start();
for (int i = 0; i < 1000000; i++)
{
    sb.Append(i.ToString());
}
sw.Stop();
Debug.Write(sw.ElapsedMilliseconds.ToString());

2 个答案:

答案 0 :(得分:2)

有更快的方法来进行字符串连接和其他一些逻辑。使用字符串构建器构建整个事物也可能是减速的一部分。一些图书馆已经考虑了一些这些事情并且可能会表现得更快,正如一些人所建议的那样。

以下是一些使用CsvHelper的代码(我写的)。

using( var dt = new DataTable() )
{
    dt.Load( dataReader );
    foreach( DataColumn column in dt.Columns )
    {
        csv.WriteField( column.ColumnName );
    }
    csv.NextRecord();

    foreach( DataRow row in dt.Rows )
    {
        for( var i = 0; i < dt.Columns.Count; i++ )
        {
            csv.WriteField( row[i] );
        }
        csv.NextRecord();
    }
}

如果您拥有DataReader,那么您甚至不必使用DataTable,这也可以加快速度。

var hasHeaderBeenWritten = false;
while( dataReader.Read() )
{
    if( !hasHeaderBeenWritten )
    {
        for( var i = 0; i < dataReader.FieldCount; i++ )
        {
            csv.WriteField( dataReader.GetName( i ) );
        }
        csv.NextRecord();
        hasHeaderBeenWritten = true;
    }

    for( var i = 0; i < dataReader.FieldCount; i++ )
    {
        csv.WriteField( dataReader[i] );
    }
    csv.NextRecord();
}

答案 1 :(得分:-2)

你所拥有的不是“伟大的”代码......我想大多数人会建议使用类似CSVHelper nuget包的东西。但是,我还要说那个代码不是4秒,只有100行。获取数据表中的数据需要多长时间?我猜这就是花费4秒钟的大部分时间。