我正在努力将数据从遗留系统迁移到我们的新应用程序(在Oracle数据库10gR2上运行)。作为迁移的一部分,我正在编写一个脚本,将数据插入到应用程序使用的表中。
导入的数据行数达到数千,而源数据不干净(NOT NULL列中的意外空值等)。因此,在通过脚本插入数据时,只要发生此类异常,脚本就会突然结束,并回滚整个事务。
有没有办法可以继续插入行清理的数据?
使用NVL()
或COALESCE()
不是一个选项,因为我想记录导致错误的行,以便下次通过时可以更正数据。
编辑:我当前的程序有一个异常处理程序,我正在记录导致错误的第一行。插入是否可以继续而不终止,因为现在在第一个处理的异常上,该过程终止执行。
答案 0 :(得分:9)
如果数据量较高,PL / SQL中的逐行处理可能会太慢。 在这些情况下,您可以使用DML错误日志记录,描述为here
CREATE TABLE raises (emp_id NUMBER, sal NUMBER
CONSTRAINT check_sal CHECK(sal > 8000));
EXECUTE DBMS_ERRLOG.CREATE_ERROR_LOG('raises', 'errlog');
INSERT INTO raises
SELECT employee_id, salary*1.1 FROM employees
WHERE commission_pct > .2
LOG ERRORS INTO errlog ('my_bad') REJECT LIMIT 10;
SELECT ORA_ERR_MESG$, ORA_ERR_TAG$, emp_id, sal FROM errlog;
ORA_ERR_MESG$ ORA_ERR_TAG$ EMP_ID SAL
--------------------------- -------------------- ------ -------
ORA-02290: check constraint my_bad 161 7700
(HR.SYS_C004266) violated
答案 1 :(得分:5)
使用PLSQL,您可以在自己的事务中执行每个插入(每次插入后都是COMMIT),并使用异常处理程序记录或忽略错误。
答案 2 :(得分:4)
试试这个:
for r_row in c_legacy_data loop
begin
insert into some_table(a, b, c, ...)
values (r_row.a, r_row.b, r_row.c, ...);
exception
when others then
null; /* or some extra logging */
end;
end loop;
答案 3 :(得分:1)
DECLARE
cursor;
BEGIN
loop for each row in cursor
BEGIN -- subBlock begins
SAVEPOINT startTransaction; -- mark a savepoint
-- do whatever you have do here
COMMIT;
EXCEPTION
ROLLBACK TO startTransaction; -- undo changes
END; -- subBlock ends
end loop;
END;
答案 4 :(得分:0)
如果使用sqlldr,则可以指定继续加载数据,并且将跳过所有“错误”数据并将其记录在单独的文件中。