Question

现在我有一个SQL Server表，其中填充了来自外部.CSV文件的数据，该文件偶尔会通过附加新数据进行更新。最初我的程序设置为每次运行时删除表中的所有内容，它会从.CSV文件上传所有内容。现在我正在尝试重新配置它，以便它只从文件中插入新附加的数据，而不是先删除所有内容。

该程序首先从上传到数组的.CSV文件中分隔数据。然后我基本上通过数组并上传每个元素。现在我有二级数组，其中包含表中的所有当前主键，到目前为止，我试图将这些与正在读取的.CSV文件中的那些进行比较。因此，它检查.CSV文件中的主键是否已经在表/辅助数组中，它是否继续进行插入。这似乎是一个合理的逻辑，但由于某种原因，我无法让它发挥作用。

以下是我的代码的内容：

private void backgroundWorker1_DoWork(object sender, DoWorkEventArgs e)
    {

        //Create new SQL connection and adapter using Windows Authentication
        SqlConnection myConnection = new SqlConnection("Data Source=database; Initial Catalog=Dashboard; Integrated Security=SSPI; Persist Security Info=false; Trusted_Connection=Yes");
        SqlDataAdapter da = new SqlDataAdapter();

        try
        {
            myConnection.Open();

            da.InsertCommand = new SqlCommand("INSERT INTO DashboardLibAnswer(Id,Date,Time,Question,Details,Answer,Notes,EnteredBy,WhereReceived,QuestionType,AnswerMethod,TransactionDuration)"
                + "VALUES(@Id,@Date,@Time,@Question,@Details,@Answer,@Notes,@EnteredBy,@WhereReceived,@QuestionType,@AnswerMethod,@TransactionDuration)", myConnection);

            da.InsertCommand.Parameters.Add("@Id", SqlDbType.NVarChar);
            da.InsertCommand.Parameters.Add("@Date", SqlDbType.Text);
            da.InsertCommand.Parameters.Add("@Time", SqlDbType.Text);
            da.InsertCommand.Parameters.Add("@Question", SqlDbType.Text);
            da.InsertCommand.Parameters.Add("@Details", SqlDbType.Text);
            da.InsertCommand.Parameters.Add("@Answer", SqlDbType.Text);
            da.InsertCommand.Parameters.Add("@Notes", SqlDbType.Text);
            da.InsertCommand.Parameters.Add("@EnteredBy", SqlDbType.NVarChar);
            da.InsertCommand.Parameters.Add("@WhereReceived", SqlDbType.NVarChar);
            da.InsertCommand.Parameters.Add("@QuestionType", SqlDbType.NVarChar);
            da.InsertCommand.Parameters.Add("@AnswerMethod", SqlDbType.NVarChar);
            da.InsertCommand.Parameters.Add("@TransactionDuration", SqlDbType.NVarChar);

            //Using the global variable counter this loop will go through each valid entry and insert it into the specifed database/table
            for (int i = 0; i < counter; i++)
            {
                //This is where I try to do the comparision. 
                //idS is the secondary array with all the current primary keys in the Table
                //collection is the primary array that stores new data from the .CSV file
                if (idS.ElementAt(i) != collection.getIdItems(i))
                {
                    da.InsertCommand.Parameters["@Id"].Value = collection.getIdItems(i);
                    da.InsertCommand.Parameters["@Date"].Value = collection.getDateItems(i);
                    da.InsertCommand.Parameters["@Time"].Value = collection.getTimeItems(i);
                    da.InsertCommand.Parameters["@Question"].Value = collection.getQuestionItems(i);
                    da.InsertCommand.Parameters["@Details"].Value = collection.getDetailsItems(i);
                    da.InsertCommand.Parameters["@Answer"].Value = collection.getAnswerItems(i);
                    da.InsertCommand.Parameters["@Notes"].Value = collection.getNotesItems(i);
                    da.InsertCommand.Parameters["@EnteredBy"].Value = collection.getEnteredByItems(i);
                    da.InsertCommand.Parameters["@WhereReceived"].Value = collection.getWhereItems(i);
                    da.InsertCommand.Parameters["@QuestionType"].Value = collection.getQuestionTypeItems(i);
                    da.InsertCommand.Parameters["@AnswerMethod"].Value = collection.getAnswerMethodItems(i);
                    da.InsertCommand.Parameters["@TransactionDuration"].Value = collection.getTransactionItems(i);
                    da.InsertCommand.ExecuteNonQuery();
                }


                //Updates the progress bar using the i in addition to 1 
                _worker.ReportProgress(i + 1);

            } // end for

            //Once the importing is done it will show the appropriate message
            MessageBox.Show("Finished Importing");

        } // end try
        catch (Exception exceptionError)
        {
            //To show exceptions thrown just uncomment bellow line
            //rtbOutput.AppendText(exceptionError.ToString);

        } // end catch

        //Closes the SQL connection after importing is done
        myConnection.Close();

    } // end backgroundWorker1_DoWork

现在程序执行但没有插入新数据。似乎程序没有离开for循环，因为如果它成功运行，它会显示“完成导入”消息框。

Answer 1

该行

if (idS.ElementAt(i) != collection.getIdItems(i))

看起来很奇怪。取决于getIdItems返回的内容，它看起来好像你将在第一次两个列表不同步时匹配 - 所以如果项目没有按照你已经持久化的顺序出现，你可能得到一个假阳性。 IE浏览器。代码将评估该项目不存在并且应该保留，即使它存在于您的集合中的其他位置。

然后，如果您有一个唯一约束，插入将失败，将您发送到已注释掉的异常处理程序 - 然后退出。

我要做的第一件事就是激活异常处理程序以了解发生了什么。其次，我可能会更改上面的代码，以便您查找而不是遍历您的idS集合。 IE浏览器。如果你使idS列表或包含Linq扩展方法，你可以这样做：

if (!idS.Contains(collection.getIdItems(i))

编辑：请注意，对于较大的idS，这不是特别有效，并且随着列表的增长不能很好地扩展。如果您希望处理大量idS，则可能需要将列表更改为哈希集合，或使用此处建议的解决方案Check if list<t> contains any of another list。

仅将新数据插入SQL表

1 个答案: