我有一个表(A)
,其中包含一个名为confirmation_number
的列。它被定义为varchar2(30)
,包含SMITERI-2012-02-31-4567
。
我有另一个表(B)
,其中还包含一个名为confirmation_number
的列,它也是varchar2(30)
。
我有一个存储过程从A
中提取数据,对其执行一些转换,并且它包含确认号列。
我使用C#
和ODP.Net
来运行存储过程并加载DataTable
。然后我执行一些额外的转换。但是,我从未触及确认编号栏。
最后,我创建了一个OracleBulkCopy
对象,设置了列映射,告诉update
表B
,然后调用loader.WriteToServer(dataTable)
。
我收到以下错误:
Input string was not in a correct format.
at System.Number.StringToNumber(String str, NumberStyles options, NumberBuffer& number, NumberFormatInfo info, Boolean parseDecimal)
at System.Number.ParseInt64(String value, NumberStyles options, NumberFormatInfo numfmt)
at Oracle.DataAccess.Client.OracleBulkCopy.PerformBulkCopy()
我已确认confirmation_number
列上发生错误,因为如果我没有加载该列,则dataload会成功。
为什么BulkCopy
试图将varchar(2)
转变为Number
的任何想法?
修改 我已确认以下相关问题:
这不仅仅发生在确认号码上。这个 似乎只是字符串列上的问题 - 无论是来自a 字符串到字符串或字符串到整数。
每个varchar2列都不会发生这种情况 - 姓氏和名字没有问题。
在没有空值的列上都会发生这种情况(确认 数字)和可能具有空值(街道类型)的列。
在调查之前调查数据表的内容 loader begin显示这些之间的列定义没有区别 成功进入和不成功进入。
我开始怀疑BulkCopy本身是否存在错误,是否需要使用其他实用程序来加载。
编辑:
以下是修剪后的代码。
表A
CREATE TABLE "APPS_UNPROCESSED"
( "LAST_NAME" VARCHAR2(30 BYTE),
"FIRST_NAME" VARCHAR2(30 BYTE),
"MIDDLE_NAME" VARCHAR2(30 BYTE),
"NAME_SUFFIX" VARCHAR2(30 BYTE),
"GENDER" VARCHAR2(1 BYTE),
"DATE_OF_BIRTH" VARCHAR2(10 BYTE),
"ID" NUMBER,
:
:
"CONFIRMATION_NUMBER" VARCHAR2(30 BYTE) NOT NULL ENABLE,
"IS_FBO" NUMBER(1,0),
:
:
CONSTRAINT "VR_APPS_UNPROCESSED_PK" PRIMARY KEY ("CONFIRMATION_NUMBER")
表B
CREATE TABLE "APPS_PROCESSED"
( "LAST_NAME" VARCHAR2(30 BYTE),
"FIRST_NAME" VARCHAR2(30 BYTE),
"MIDDLE_NAME" VARCHAR2(30 BYTE),
"NAME_SUFFIX" VARCHAR2(30 BYTE),
"GENDER" NUMBER(1,0),
"DATE_OF_BIRTH" DATE,
:
:
"CONFIRMATION_NUMBER" VARCHAR2(30 BYTE),
"ID" NUMBER,
"IS_FBO" NUMBER(1,0),
:
:
"ID" NUMBER NOT NULL ENABLE,
:
:
CONSTRAINT "VR_APPLICATION_PK" PRIMARY KEY ("ID")
程序
procedure getUnprocessedApps(results OUT sys_refcursor)
as
BEGIN
open results for
select
a.last_name
,a.first_name
,a.middle_name
,a.name_suffix
,decode(a.gender, 'M', 1, 0) as gender_id
,a.gender as gender_code
,to_char(to_date(a.date_of_birth, 'MM-DD-YYYY'), 'DD-mon-YYYY') as date_of_birth
,cast(a.confirmation_number as varchar2(30)) as confirmation_number
,a.id
,0 as is_fbo
:
:
from vr_apps_unprocessed a
获取数据
DataSet data = new DataSet();
OracleConnection conn = null;
OracleCommand cmd = null;
OracleDataAdapter data_adapter = new OracleDataAdapter();
//fetch the data and load
using (conn = new OracleConnection(connString))
{
using (cmd = new OracleCommand())
{
cmd.Connection = conn;
cmd.CommandText = "APPS.getUnprocessedApps";
cmd.CommandType = CommandType.StoredProcedure;
cmd.Parameters.Add("results", OracleDbType.RefCursor, ParameterDirection.Output);
conn.Open();
data_adapter.SelectCommand = cmd;
data_adapter.Fill(data, "results");
}
}
return data.Tables["results"];
设置列映射
private static Dictionary<string, string> ColumnMappings()
{
Dictionary<string, string> mapping = new Dictionary<string, string>();
mapping.Add("last_name", "last_name");
mapping.Add("first_name", "first_name");
mapping.Add("middle_name", "middle_name");
mapping.Add("name_suffix", "name_suffix");
mapping.Add("gender_id", "gender");
mapping.Add("date_of_birth", "date_of_birth");
mapping.Add("is_fbo", "is_fbo");
mapping.Add("confirmation_number", "confirmation_number");
mapping.Add("id", "id");
:
:
return mapping;
}
加载文件
private static void loadFiles(DataTable dt, string connString)
{
OracleConnection orclconn = null;
OracleBulkCopy loader = null;
//now insert the data into Oracle
using (orclconn = new OracleConnection(connString))
{
orclconn.Open();
using (loader = new OracleBulkCopy(orclconn))
{
loader.DestinationTableName = "APPS_Processed"
foreach (KeyValuePair<string, string> k in ColumnMappings())
{
loader.ColumnMappings.Add(k.Key, k.Value);
}
loader.WriteToServer(dt);
} //end using oracle bulk loader
} //end using oracle connection
}
修改 我一直无法使用批量复制工作,但我已经采用了使用数组工作的传统方法:http://www.oracle.com/technetwork/issue-archive/2009/09-sep/o59odpnet-085168.html
它肯定比成功的批量加载慢,但至少我可以获取数据。但是,如果有人对于为什么批量复制本身仍然失败,我仍然会喜欢。
答案 0 :(得分:1)
似乎BulkCopy
根据DataTable
中所声明的列类型进行某种类型转换。
如果为导致问题的列打印Column.DataType.ToString()
,则很可能会看到数据库所期望的类型以外的类型。
您可以使用旧数据表创建新数据表,但显式地将问题列的Column.DataType
更改为数据库所需的类型。
public DataTable potentialFix(DataTable dt) {
DataTable newTable = new DataTable(dt.TableName);
//define columns for the new table with type string (or whatever type you want)
foreach (DataColumn dc in dt.Columns)
{
newTable.Columns.Add(new DataColumn(dc.ColumnName, typeof(String)));
}
newTable.BeginLoadData();
DataTableReader dtReader = new DataTableReader(dt);
newTable.Load(dtReader);
newTable.EndLoadData();
return newTable;
}
答案 1 :(得分:0)
我认为问题出在您的“date_of_birth”栏目中。你传递的是字符串而不是日期。由于日期是数字,它会尝试投射它们,但它不是预期的格式,你改变了几个月和几天的顺序。