C#DbDataReader填充OutOfMemoryException中的List结果

时间:2016-07-28 11:53:37

标签: c# out-of-memory compact-database

我目前正在尝试从包含大约3-4百万行的紧凑型ce数据库中读取一个大表。我目前的数据库大小为832MB。 使用记录填充列表会抛出OutOfMemoryException

模型代码:

    using (var con = new DomainContext())
    {
        foreach (var item in con.logRecords)
        {
            if (item.Info != null && item.Info != "")
                item.Timestamp = DateTime.ParseExact(item.Info, "MM.dd.yyyy HH:mm:ss.fff", culture).Ticks;
        }
        con.SaveChanges();

    }

新方法,仍然没有让它发挥作用....

        Task.Factory.StartNew(() =>
        {
            using (var con = new DomainContext())
            {
                for (int i = 0; i < 300; i++)
                {
                    try
                    {
                        var temp = con.logRecords.Where(p => p.Id <= i * 10000 + 10000 && p.Id >= i * 10000);

                        foreach (var item in temp)
                        {

                            if (item.Info != null && item.Info != "")
                                item.Timestamp = DateTime.ParseExact(item.Info, "MM.dd.yyyy HH:mm:ss.fff", culture).Ticks;
                        }

                        con.SaveChanges();

                    }
                    catch { }
                    GC.Collect();
                    Console.WriteLine(i.ToString());


                }
            }
        });

1 个答案:

答案 0 :(得分:0)

我使用原生SQL,将时间戳解析为SQL时间戳,然后使用DATEDIFF(datepart,startdate,enddate)找到自1970年以来的秒数。增加了自第0年以来的秒数。我失去了毫秒的部分,但我想这是下一个最好的事情。