将任何文件保存到数据库中,只需将其转换为字节数组?

时间:2010-04-05 15:58:33

标签: c# file-io byte

将文件转换为字节数组是将ANY文件格式保存到磁盘或数据库var二进制列的最佳方法吗?

因此,如果有人想保存.gif或.doc / .docx或.pdf文件,我可以将其转换为字节数UFT8并将其作为字节流保存到数据库中吗?

7 个答案:

答案 0 :(得分:137)

因为没有提到你的意思是什么数据库我假设是SQL Server。以下解决方案适用于2005年和2008年。

您必须使用VARBINARY(MAX)创建表作为其中一列。在我的示例中,我创建了表Raporty,其中列RaportPlikVARBINARY(MAX)列。

file drive放入数据库的方法:

public static void databaseFilePut(string varFilePath) {
    byte[] file;
    using (var stream = new FileStream(varFilePath, FileMode.Open, FileAccess.Read)) {
        using (var reader = new BinaryReader(stream)) {
            file = reader.ReadBytes((int) stream.Length);       
        }          
    }
    using (var varConnection = Locale.sqlConnectOneTime(Locale.sqlDataConnectionDetails))
    using (var sqlWrite = new SqlCommand("INSERT INTO Raporty (RaportPlik) Values(@File)", varConnection)) {
        sqlWrite.Parameters.Add("@File", SqlDbType.VarBinary, file.Length).Value = file;
        sqlWrite.ExecuteNonQuery();
    }
}

此方法是从数据库获取file并将其保存在drive

public static void databaseFileRead(string varID, string varPathToNewLocation) {
    using (var varConnection = Locale.sqlConnectOneTime(Locale.sqlDataConnectionDetails))
    using (var sqlQuery = new SqlCommand(@"SELECT [RaportPlik] FROM [dbo].[Raporty] WHERE [RaportID] = @varID", varConnection)) {
        sqlQuery.Parameters.AddWithValue("@varID", varID);
        using (var sqlQueryResult = sqlQuery.ExecuteReader())
            if (sqlQueryResult != null) {
                sqlQueryResult.Read();
                var blob = new Byte[(sqlQueryResult.GetBytes(0, 0, null, 0, int.MaxValue))];
                sqlQueryResult.GetBytes(0, 0, blob, 0, blob.Length);
                using (var fs = new FileStream(varPathToNewLocation, FileMode.Create, FileAccess.Write)) 
                    fs.Write(blob, 0, blob.Length);
            }
    }
}

此方法是从数据库获取file并将其设为MemoryStream

public static MemoryStream databaseFileRead(string varID) {
    MemoryStream memoryStream = new MemoryStream();
    using (var varConnection = Locale.sqlConnectOneTime(Locale.sqlDataConnectionDetails))
    using (var sqlQuery = new SqlCommand(@"SELECT [RaportPlik] FROM [dbo].[Raporty] WHERE [RaportID] = @varID", varConnection)) {
        sqlQuery.Parameters.AddWithValue("@varID", varID);
        using (var sqlQueryResult = sqlQuery.ExecuteReader())
            if (sqlQueryResult != null) {
                sqlQueryResult.Read();
                var blob = new Byte[(sqlQueryResult.GetBytes(0, 0, null, 0, int.MaxValue))];
                sqlQueryResult.GetBytes(0, 0, blob, 0, blob.Length);
                //using (var fs = new MemoryStream(memoryStream, FileMode.Create, FileAccess.Write)) {
                memoryStream.Write(blob, 0, blob.Length);
                //}
            }
    }
    return memoryStream;
}

此方法是将MemoryStream放入数据库:

public static int databaseFilePut(MemoryStream fileToPut) {
        int varID = 0;
        byte[] file = fileToPut.ToArray();
        const string preparedCommand = @"
                    INSERT INTO [dbo].[Raporty]
                               ([RaportPlik])
                         VALUES
                               (@File)
                        SELECT [RaportID] FROM [dbo].[Raporty]
            WHERE [RaportID] = SCOPE_IDENTITY()
                    ";
        using (var varConnection = Locale.sqlConnectOneTime(Locale.sqlDataConnectionDetails))
        using (var sqlWrite = new SqlCommand(preparedCommand, varConnection)) {
            sqlWrite.Parameters.Add("@File", SqlDbType.VarBinary, file.Length).Value = file;

            using (var sqlWriteQuery = sqlWrite.ExecuteReader())
                while (sqlWriteQuery != null && sqlWriteQuery.Read()) {
                    varID = sqlWriteQuery["RaportID"] is int ? (int) sqlWriteQuery["RaportID"] : 0;
                }
        }
        return varID;
    }

快乐编码: - )

答案 1 :(得分:8)

虽然您可以以这种方式存储文件,但它有很大的权衡:

  • 大多数数据库并未针对大量二进制数据进行优化,并且查询性能通常随着表的膨胀而显着降低,即使使用索引也是如此。 (SQL Server 2008,具有FILESTREAM列类型,是规则的例外。)
  • 数据库备份/复制变得非常慢。
  • 使用200万张图像来处理损坏的驱动器要容易得多 - 只需更换RAID上的磁盘 - 而不是损坏的数据库表。
  • 如果您不小心删除了文件系统上的十几个图像,您的操作人员可以很容易地从备份中替换它们,并且由于表索引比较小,因此可以快速恢复。如果您在一个巨大的数据库表中意外删除了十几个图像,那么您需要等待很长时间才能从备份中恢复数据库,同时使整个系统陷于瘫痪状态。

这些只是我能想到的一些缺点。对于小型项目,可能值得以这种方式存储文件,但如果您正在设计企业级软件,我强烈建议不要使用它。

答案 2 :(得分:7)

这实际上取决于数据库服务器。

例如,SQL Server 2008正好支持FILESTREAM数据类型。

除此之外,如果您使用MemoryStream,则会使用ToArray()方法转换为byte[] - 这可用于填充varbinary字段..

答案 3 :(得分:2)

是的,通常将文件存储在数据库中的最佳方法是将字节数组保存在BLOB列中。您可能需要一些列来另外存储文件的元数据,例如名称,扩展名等。

将文件存储在数据库中并不总是一个好主意 - 例如,如果将文件存储在数据库中,数据库大小将会快速增长。但这一切都取决于您的使用场景。

答案 4 :(得分:2)

确认我能够使用MadBoy发布并由Otiel在MS SQL Server 2012和2014上编辑的答案以及之前使用varbinary(MAX)列列出的版本。

如果您想知道为什么不能将“Filestream”(在单独的答案中注明)作为SQL Server表设计器中的数据类型,或者为什么不能使用T-SQL将列的数据类型设置为“Filestream”,那是因为FILESTREAM是varbinary(MAX)数据类型的存储属性。它本身不是数据类型。

有关在数据库上设置和启用FILESTREAM的信息,请参阅以下文章: https://msdn.microsoft.com/en-us/library/cc645923(v=sql.120).aspx

http://www.kodyaz.com/t-sql/default-filestream-filegroup-is-not-available-in-database.aspx

配置完成后,可以添加启用了文件流的varbinary(max)列:

ALTER TABLE TableName

ADD ColumnName varbinary(max)FILESTREAM NULL

GO

答案 5 :(得分:2)

我将在SQL Server和Oracle中描述我存储文件的方式。它在很大程度上取决于您获取文件的方式,首先取决于您将如何获取其内容,这取决于您使用哪个数据库存储它将用于存储它的内容。这是2个单独的数据库示例,其中有2个单独的方法来获取我使用的文件。

SQL Server

简短回答:我使用了一个base64字节字符串,转换为byte[]并存储在varbinary(max)字段中。

答案很长:

假设您要通过网站上传,因此您正在使用<input id="myFileControl" type="file" />控件或React DropZone。要获取该文件,您需要执行var myFile = document.getElementById("myFileControl")[0];myFile = this.state.files[0];之类的操作。

从那里开始,我在这里使用代码获取base64字符串:Convert input=file to byte array(使用函数UploadFile2)。

然后我将该字符串,文件名(myFile.name)和类型(myFile.type)放入JSON对象中:

var myJSONObj = {
    file: base64string,
    name: myFile.name,
    type: myFile.type,
}

使用XMLHttpRequest将文件发布到MVC服务器后端,指定内容类型application/jsonxhr.send(JSON.stringify(myJSONObj);。您必须构建一个ViewModel以将其绑定到:

public class MyModel
{
    public string file { get; set; }
    public string title { get; set; }
    public string type { get; set; }
}

并指定[FromBody]MyModel myModelObj作为传入的参数:

[System.Web.Http.HttpPost]  // required to spell it out like this if using ApiController, or it will default to System.Mvc.Http.HttpPost
public virtual ActionResult Post([FromBody]MyModel myModelObj)

然后您可以将其添加到该函数中并使用Entity Framework保存它:

MY_ATTACHMENT_TABLE_MODEL tblAtchm = new MY_ATTACHMENT_TABLE_MODEL();
tblAtchm.Name = myModelObj.name;
tblAtchm.Type = myModelObj.type;
tblAtchm.File = System.Convert.FromBase64String(myModelObj.file);
EntityFrameworkContextName ef = new EntityFrameworkContextName();
ef.MY_ATTACHMENT_TABLE_MODEL.Add(tblAtchm);
ef.SaveChanges();

tblAtchm.File = System.Convert.FromBase64String(myModelObj.file);是操作线。

您需要一个模型来表示数据库表:

public class MY_ATTACHMENT_TABLE_MODEL 
{
    [Key]
    public byte[] File { get; set; }  // notice this change
    public string Name { get; set; }
    public string Type { get; set; }
}

这会将数据作为varbinary(max)保存到byte[]字段中。 NameType分别为nvarchar(250)nvarchar(10)。您可以通过将int列添加到表中来包含尺寸&amp; MY_ATTACHMENT_TABLE_MODELpublic int Size { get; set;},并在上面的行tblAtchm.Size = System.Convert.FromBase64String(myModelObj.file).Length;中添加。

<强>的Oracle

简短回答:将其转换为byte[],将其分配给OracleParameter,将其添加到OracleCommand,然后更新您的表格BLOB字段使用对参数ParameterName值的引用::BlobParameter

答案很长: 当我为Oracle做这个时,我使用的是OpenFileDialog,我检索并以这种方式发送了字节/文件信息:

byte[] array;
OracleParameter param = new OracleParameter();
Microsoft.Win32.OpenFileDialog dlg = new Microsoft.Win32.OpenFileDialog();
dlg.Filter = "Image Files (*.jpg, *.jpeg, *.jpe)|*.jpg;*.jpeg;*.jpe|Document Files (*.doc, *.docx, *.pdf)|*.doc;*.docx;*.pdf"
if (dlg.ShowDialog().Value == true)
{
    string fileName = dlg.FileName;
    using (FileStream fs = File.OpenRead(fileName)
    {
        array = new byte[fs.Length];
        using (BinaryReader binReader = new BinaryReader(fs))
        {
            array = binReader.ReadBytes((int)fs.Length);
        }

        // Create an OracleParameter to transmit the Blob
        param.OracleDbType = OracleDbType.Blob;
        param.ParameterName = "BlobParameter";
        param.Value = array;  // <-- file bytes are here
    }
    fileName = fileName.Split('\\')[fileName.Split('\\').Length-1]; // gets last segment of the whole path to just get the name

    string fileType = fileName.Split('.')[1];
    if (fileType == "doc" || fileType == "docx" || fileType == "pdf")
        fileType = "application\\" + fileType;
    else
        fileType = "image\\" + fileType;

    // SQL string containing reference to BlobParameter named above
    string sql = String.Format("INSERT INTO YOUR_TABLE (FILE_NAME, FILE_TYPE, FILE_SIZE, FILE_CONTENTS, LAST_MODIFIED) VALUES ('{0}','{1}',{2},:BlobParamerter, SYSDATE)", fileName, fileType, array.Length);

    // Do Oracle Update
    RunCommand(sql, param);
}

在Oracle更新中,完成了ADO:

public void RunCommand(string sql, OracleParameter param)
{
    OracleConnection oraConn = null;
    OracleCommand oraCmd = null;
    try
    {
        string connString = GetConnString();
        oraConn = OracleConnection(connString);
        using (oraConn)
        {
            if (OraConnection.State == ConnectionState.Open)
                OraConnection.Close();

            OraConnection.Open();

            oraCmd = new OracleCommand(strSQL, oraConnection);

            // Add your OracleParameter
            if (param != null)
                OraCommand.Parameters.Add(param);

            // Execute the command
            OraCommand.ExecuteNonQuery();
        }
    }
    catch (OracleException err)
    {
       // handle exception 
    }
    finally
    {
       OraConnction.Close();
    }
}

private string GetConnString()
{
    string host = System.Configuration.ConfigurationManager.AppSettings["host"].ToString();
    string port = System.Configuration.ConfigurationManager.AppSettings["port"].ToString();
    string serviceName = System.Configuration.ConfigurationManager.AppSettings["svcName"].ToString();
    string schemaName = System.Configuration.ConfigurationManager.AppSettings["schemaName"].ToString();
    string pword = System.Configuration.ConfigurationManager.AppSettings["pword"].ToString(); // hopefully encrypted

    if (String.IsNullOrEmpty(host) || String.IsNullOrEmpty(port) || String.IsNullOrEmpty(serviceName) || String.IsNullOrEmpty(schemaName) || String.IsNullOrEmpty(pword))
    {
        return "Missing Param";
    }
    else
    {
        pword = decodePassword(pword);  // decrypt here
        return String.Format(
           "Data Source=(DESCRIPTION =(ADDRESS = ( PROTOCOL = TCP)(HOST = {2})(PORT = {3}))(CONNECT_DATA =(SID = {4})));User Id={0};Password{1};",
           user,
           pword,
           host,
           port,
           serviceName
           );
    }
}

FILE_CONTENTS列的数据类型为BLOBFILE_SIZENUMBER(10,0)LAST_MODIFIEDDATE,其余为NVARCHAR2(250)

答案 6 :(得分:1)

您使用的数据库是什么?通常你不保存文件到数据库,但我认为sql 2008支持它...

文件是二进制数据,因此UTF 8在这里无所谓..

当您尝试将字符串转换为字节数组而不是文件到字节数组时,UTF 8很重要。