Question

我在我的项目中使用CSVReader来读取Windows服务中的.csv文件。我们将.csv文件传递给CSVReader来处理文件，它运行正常。但是最近我们决定将csv文件保存到Database表并从那里读取它。当用户提交csv文件进行处理时，我们的aspx页面将读取csv文件并将其转换为字节数组并将其保存到数据库。并且服务将读取表并获取字节数组并将其转换为Filestream。此流将传递到CSVReader以进行进一步的工作。现在它为最后一行最后一列抛出错误。它只在保存并从数据库读取后才发生。我收到以下错误。不知道如何解决这个问题。

“位于'494'的记录'9'字段'3附近，CSV似乎已损坏。当前原始数据：'

听到的是代码将文件转换为字节数组.....

try
{
     fs = new FileStream(filepath, FileMode.Open);
     fsbuffer = new byte[fs.Length];
     fs.Read(fsbuffer, 0, (int)fs.Length);
}

从DB读取到字节数组......

myobject.FileByteArray = ObjectToByteArray(row);

public byte[] ObjectToByteArray(DataRow row)
        {
            if (row["fileBytearray"] == null)
                return null;
            try
            {
                BinaryFormatter bf = new BinaryFormatter();
                System.IO.MemoryStream ms = new System.IO.MemoryStream();

                bf.Serialize(ms, row["fileBytearray"]);
                return ms.ToArray();
            }
    }

Stream fileStream = new MemoryStream(myobject.FileByteArray)
using (CsvReader csv = 
                        new CsvReader(new StreamReader(fileStream, System.Text.Encoding.UTF7), hasHeader, ','))

Answer 1

我无法重新创建您的问题，因此，在没有从头到尾看到保存和加载的情况下，我建议您尝试以下方法进行检索：

public MemoryStream LoadReportData(int rowId)
{

  MemoryStream stream = new MemoryStream();

  using (BinaryWriter writer = new BinaryWriter(stream))
  {

    using (DbConnection connection = db.CreateConnection())
    {
      DbCommand selectCommand = "SELECT CSVData FROM YourTable WHERE Id = @rowId";

      selectCommand.Connection = connection;

      db.AddInParameter(selectCommand, "@rowId", DbType.Int32, rowId);
      connection.Open();

      using (IDataReader reader = selectCommand.ExecuteReader(CommandBehavior.SequentialAccess))
      {

        while (reader.Read())
        {

          int startIndex = 0;
          int bufferSize = 8192;

          byte[] buffer = new byte[bufferSize];

          long retVal = reader.GetBytes(0, startIndex, buffer, 0, bufferSize);

          while (retVal == bufferSize)
          {

            writer.Write(buffer);
            writer.Flush();

            startIndex += bufferSize;
            retVal = reader.GetBytes(0, startIndex, buffer, 0, bufferSize);

          }

          writer.Write(buffer, 0, (int)retVal);
        }

      }

    }
  }

  return stream;

}

您需要将selectCommand sql和parameters替换为您用于返回数据的任何sql。

此方法使用SqlDataReader从相应的行（在我的示例中由rowId标识）和列（在我的示例中称为CSVData）中顺序读取字节，这应避免在路上出现任何截断问题out（可能是您的DataTable对象仅返回第一个n个字节）。 MemoryStream对象可用于将CSV文件重新保存到文件系统进行测试，或直接送入CSVReader。

如果您可以发布Save方法（实际上将数据保存到数据库中），那么我们也可以检查这一点，以确保不会发生截断。

我现在可以做的另一个建议是将文件加载到byte数组中。如果您要一次性加载文件，那么您只需替换：

try
{
     fs = new FileStream(filepath, FileMode.Open);
     fsbuffer = new byte[fs.Length];
     fs.Read(fsbuffer, 0, (int)fs.Length);
}

带

byte[] fileBytes = File.ReadAllBytes(filepath);

CSVReader在最后一行最后一列抛出错误

1 个答案: