Oracle.DataAccess.Client.BulkCopy - 尝试将varchar2强制转换为数字

时间:2012-04-06 21:22:24

标签: c# oracle11g odp.net

我有一个表(A),其中包含一个名为confirmation_number的列。它被定义为varchar2(30),包含SMITERI-2012-02-31-4567

之类的内容

我有另一个表(B),其中还包含一个名为confirmation_number的列,它也是varchar2(30)

我有一个存储过程从A中提取数据,对其执行一些转换,并且它包含确认号列。

我使用C#ODP.Net来运行存储过程并加载DataTable。然后我执行一些额外的转换。但是,我从未触及确认编号栏。

最后,我创建了一个OracleBulkCopy对象,设置了列映射,告诉updateB,然后调用loader.WriteToServer(dataTable)

我收到以下错误

Input string was not in a correct format.
   at System.Number.StringToNumber(String str, NumberStyles options, NumberBuffer& number, NumberFormatInfo info, Boolean parseDecimal)
   at System.Number.ParseInt64(String value, NumberStyles options, NumberFormatInfo numfmt)
   at Oracle.DataAccess.Client.OracleBulkCopy.PerformBulkCopy()

我已确认confirmation_number列上发生错误,因为如果我没有加载该列,则dataload会成功。

为什么BulkCopy试图将varchar(2)转变为Number的任何想法?

修改 我已确认以下相关问题:

  1. 这不仅仅发生在确认号码上。这个 似乎只是字符串列上的问题 - 无论是来自a 字符串到字符串或字符串到整数。

  2. 每个varchar2列都不会发生这种情况 - 姓氏和名字没有问题。

  3. 在没有空值的列上都会发生这种情况(确认 数字)和可能具有空值(街道类型)的列。

  4. 在调查之前调查数据表的内容 loader begin显示这些之间的列定义没有区别 成功进入和不成功进入。

  5. 我开始怀疑BulkCopy本身是否存在错误,是否需要使用其他实用程序来加载。

    编辑:

    以下是修剪后的代码。

    表A

      CREATE TABLE "APPS_UNPROCESSED" 
       (    "LAST_NAME" VARCHAR2(30 BYTE), 
        "FIRST_NAME" VARCHAR2(30 BYTE), 
        "MIDDLE_NAME" VARCHAR2(30 BYTE), 
        "NAME_SUFFIX" VARCHAR2(30 BYTE), 
        "GENDER" VARCHAR2(1 BYTE), 
        "DATE_OF_BIRTH" VARCHAR2(10 BYTE), 
        "ID" NUMBER, 
         :
         :
        "CONFIRMATION_NUMBER" VARCHAR2(30 BYTE) NOT NULL ENABLE, 
        "IS_FBO" NUMBER(1,0), 
         :
         :
         CONSTRAINT "VR_APPS_UNPROCESSED_PK" PRIMARY KEY ("CONFIRMATION_NUMBER")
    

    表B

      CREATE TABLE "APPS_PROCESSED"
       (    "LAST_NAME" VARCHAR2(30 BYTE), 
        "FIRST_NAME" VARCHAR2(30 BYTE), 
        "MIDDLE_NAME" VARCHAR2(30 BYTE), 
        "NAME_SUFFIX" VARCHAR2(30 BYTE), 
        "GENDER" NUMBER(1,0), 
        "DATE_OF_BIRTH" DATE,
         :
         :
        "CONFIRMATION_NUMBER" VARCHAR2(30 BYTE), 
        "ID" NUMBER, 
        "IS_FBO" NUMBER(1,0),
         :
         :
        "ID" NUMBER NOT NULL ENABLE, 
         :
         :
         CONSTRAINT "VR_APPLICATION_PK" PRIMARY KEY ("ID")
    

    程序

     procedure getUnprocessedApps(results OUT sys_refcursor)
       as
       BEGIN
        open results for
          select 
            a.last_name
            ,a.first_name
            ,a.middle_name
            ,a.name_suffix
            ,decode(a.gender, 'M', 1, 0) as gender_id
            ,a.gender as gender_code
            ,to_char(to_date(a.date_of_birth, 'MM-DD-YYYY'), 'DD-mon-YYYY') as date_of_birth
            ,cast(a.confirmation_number as varchar2(30)) as confirmation_number
            ,a.id
            ,0 as is_fbo
         :
         :
          from vr_apps_unprocessed a
    

    获取数据

                DataSet data = new DataSet();
                    OracleConnection conn = null;
                    OracleCommand cmd = null;
                    OracleDataAdapter data_adapter = new OracleDataAdapter();
    
    
                    //fetch the data and load
                    using (conn = new OracleConnection(connString))
                    {
                        using (cmd = new OracleCommand())
                        {
    
                            cmd.Connection = conn;
                            cmd.CommandText = "APPS.getUnprocessedApps";
                            cmd.CommandType = CommandType.StoredProcedure;
                            cmd.Parameters.Add("results", OracleDbType.RefCursor, ParameterDirection.Output);
                            conn.Open();
                            data_adapter.SelectCommand = cmd;
                            data_adapter.Fill(data, "results");
                        }
                    }
                    return data.Tables["results"];
    

    设置列映射

     private static Dictionary<string, string> ColumnMappings()
        {
            Dictionary<string, string> mapping = new Dictionary<string, string>();
            mapping.Add("last_name", "last_name");
            mapping.Add("first_name", "first_name");
            mapping.Add("middle_name", "middle_name");
            mapping.Add("name_suffix", "name_suffix");
            mapping.Add("gender_id", "gender"); 
            mapping.Add("date_of_birth", "date_of_birth");
            mapping.Add("is_fbo", "is_fbo"); 
            mapping.Add("confirmation_number", "confirmation_number");
            mapping.Add("id", "id"); 
         :
         :
                return mapping;
        }
    

    加载文件

     private static void loadFiles(DataTable dt, string connString)
            {
                OracleConnection orclconn = null;
                OracleBulkCopy loader = null;
    
                //now insert the data into Oracle               
                using (orclconn = new OracleConnection(connString))
                {
                    orclconn.Open();
                    using (loader = new OracleBulkCopy(orclconn)) 
                    {
                        loader.DestinationTableName = "APPS_Processed"
    
                        foreach (KeyValuePair<string, string> k in ColumnMappings())
                        {
                            loader.ColumnMappings.Add(k.Key, k.Value);
                        }
    
                        loader.WriteToServer(dt);
    
                    } //end using oracle bulk loader
    
                } //end using oracle connection
    
            }
    

    修改 我一直无法使用批量复制工作,但我已经采用了使用数组工作的传统方法:http://www.oracle.com/technetwork/issue-archive/2009/09-sep/o59odpnet-085168.html

    它肯定比成功的批量加载慢,但至少我可以获取数据。但是,如果有人对于为什么批量复制本身仍然失败,我仍然会喜欢。

2 个答案:

答案 0 :(得分:1)

似乎BulkCopy根据DataTable中所声明的列类型进行某种类型转换。

如果为导致问题的列打印Column.DataType.ToString(),则很可能会看到数据库所期望的类型以外的类型。

您可以使用旧数据表创建新数据表,但显式地将问题列的Column.DataType更改为数据库所需的类型。

public DataTable potentialFix(DataTable dt) {    
    DataTable newTable = new DataTable(dt.TableName);

    //define columns for the new table with type string (or whatever type you want)
    foreach (DataColumn dc in dt.Columns)
    {
        newTable.Columns.Add(new DataColumn(dc.ColumnName, typeof(String)));
    }

    newTable.BeginLoadData();
    DataTableReader dtReader = new DataTableReader(dt);
    newTable.Load(dtReader);
    newTable.EndLoadData();

    return newTable;
}

答案 1 :(得分:0)

我认为问题出在您的“date_of_birth”栏目中。你传递的是字符串而不是日期。由于日期是数字,它会尝试投射它们,但它不是预期的格式,你改变了几个月和几天的顺序。