我是C#-WCF / Winforms application.It使用Oracle Client API和具有简单插入查询的存储过程在Oracle数据库的临时表中插入450,000多条记录。 它需要大约15分钟才能在数据库中插入记录,有时候记录也不会被插入太多..在wcf端有各种各样的超时错误。 有没有有效的方法来进行这些插入?
感谢阅读。
这是我执行批量插入的代码:
OracleTransaction tran = null;
UpdateRowSource oldURS = this.cmd.UpdatedRowSource;
OracleCommand oldCmd = this.dbAdapter.InsertCommand;
int oldUBS = this.dbAdapter.UpdateBatchSize;
try
{
SetOutputParams();
this.OpenDBConnection();
tran = this.dbConn.BeginTransaction();
this.cmd.Transaction = tran;
this.cmd.UpdatedRowSource = UpdateRowSource.OutputParameters;
this.dbAdapter.InsertCommand = this.cmd;
this.dbAdapter.UpdateBatchSize = size;
this.dbAdapter.Update(data);
tran.Commit();
SetOutputParamValues();
}
catch (OracleException ex)
{
if (tran != null) {
tran.Rollback();
}
throw;
}
finally
{
this.CloseDBConnection();
this.cmd.Parameters.Clear();
this.cmd.UpdatedRowSource = oldURS;
this.dbAdapter.InsertCommand = oldCmd;
this.dbAdapter.UpdateBatchSize = oldUBS;
}
}
答案 0 :(得分:1)
将数据加载到表中的最快方法是datapump(impdp实用程序)。 另一种快速方法是SQL * Loader。
如果您想坚持使用C#,请查看批量操作。 我的谷歌业力发现the following examples
答案 1 :(得分:0)
我经常使用C#中的SQL * Loader将记录批量加载到阶段。
代码的内容如下:
public string RunSqlLdr(string user, string password, string dsn, string fileNameCtl, string fileNameLog)
{
// Redirect both streams so we can write/read them.
var cmdProcessInfo = new System.Diagnostics.ProcessStartInfo("cmd.exe")
{
RedirectStandardInput = true,
RedirectStandardOutput = true,
UseShellExecute = false
};
// Start the process.
var process = System.Diagnostics.Process.Start(cmdProcessInfo);
// Issue the sqlldr command and exit.
process.StandardInput.WriteLine("cd " + _directoryPath);
process.StandardInput.WriteLine("sqlldr " + user + "/" + password + "@" + dsn + " control=" + fileNameCtl + " log=" + fileNameLog);
process.StandardInput.WriteLine("exit");
// Read all the output generated from it.
var output = process.StandardOutput.ReadToEnd();
process.Dispose();
return output;
}
这将返回命令行的输出,但您还需要检查生成的日志文件以查找已加载的记录和错误计数等。
答案 2 :(得分:0)
我将大量数据插入位于澳大利亚的Oracle数据库,远离我在C#中运行客户端应用程序的位置。
以下是我如何做的总结。令我惊讶的是,我使用数组绑定快速插入数十万条记录。
这不是确切的代码,但你明白了:
using System.Data.OleDb;
int numRecords = 2;
int[] DISTRIBNO = new int[numRecords];
DISTRIBNO[0] = 100;
DISTRIBNO[1] = 101;
string sql = "INSERT INTO Distributors (distribno) VALUES (:DISTRIBNO)";
cnn = new Oracle.DataAccess.Client.OracleConnection(conString);
cnn.Open();
using (Oracle.DataAccess.Client.OracleCommand cmd = cnn.CreateCommand())
{
cmd.CommandText = sql;
cmd.CommandType = CommandType.Text;
cmd.BindByName = true;
// To use ArrayBinding, we need to set ArrayBindCount
cmd.ArrayBindCount = numRecords;
cmd.CommandTimeout = 0;
cmd.Parameters.Add(
":DISTRIBNO",
Oracle.DataAccess.Client.OracleDbType.Int32,
BR_VOLMONTH,
ParameterDirection.Input);
cmd.ExecuteNonQuery();
}//using
Carlos Merighe。
答案 3 :(得分:0)
您可能必须放弃“ DataAdapter”代码才能获得真正的性能。
这是似乎是目标的dotnet类。
Oracle.DataAccess.Client.OracleBulkCopy
OracleBulkCopy类
OracleBulkCopy对象可以有效地将数据从另一个数据源批量加载或复制到Oracle表中。
https://docs.oracle.com/cd/E11882_01/win.112/e23174/OracleBulkCopyClass.htm#ODPNT7446
https://docs.oracle.com/cd/E85694_01/ODPNT/BulkCopyCtor3.htm
.........
这是(由Oracle拥有的)ODP.NET。
请参见