Oracle / OWB:在运行时为INSERT指定分区

时间:2013-10-16 08:18:13

标签: sql oracle plsql database-partitioning oracle-warehouse-builder

(背景:我们正在运行使用Oracle Warehouse Builder构建的数据仓库。最近,我们开始收到很多“ORA-02049:等待锁定时分布式事务超时”错误。原因是我们'并行地重新运行多个ETL作业,并且每个作业都在我们的临时表中执行INSERT /*+APPEND PARALLEL*/。此临时表由源系统ID分区。)

我想知道是否可以在运行时为INSERT指定分区键。 假设我有一张桌子

create table tmp_loading_table (
  etl_source_system_fk number not null enable,
  object_id number not null enable,
  object_name varchar2(30) not null enable
)
  PARTITION BY LIST ("ETL_SOURCE_SYSTEM_FK") 
 (PARTITION "ESS1"  VALUES (1), 
 PARTITION "ESS2"  VALUES (2)  
);

然后我可以使用

插入特定的分区
insert  /*+ APPEND PARALLEL("TMP_LOADING_TABLE") */     
into tmp_loading_table partition(ESS1) (
  etl_source_system_fk, object_id, object_name)
(select 1 etl_source_system_fk, object_id, object_name from user_objects);

但这需要我对分区名称进行硬编码。

由于我们的OWB映射是通用的(它们将源系统ID作为参数),我想在运行时提供分区名称,例如

insert  /*+ APPEND PARALLEL("TMP_LOADING_TABLE") */     
into tmp_loading_table partition(:partition_name) (
  etl_source_system_fk, object_id, object_name)
(select 1 etl_source_system_fk, object_id, object_name from user_objects);

这可能吗?如果没有,是否有另一种方法可以通过Oracle Warehouse Builder实现这一目标?

1 个答案:

答案 0 :(得分:2)

PARTITION FOR语法和动态SQL可以提供帮助。

理想情况下就是这么简单:

declare
    v_partition_value number := 1;
begin
    insert  /*+ APPEND PARALLEL("TMP_LOADING_TABLE") */     
    into tmp_loading_table partition for (v_partition_value) (
      etl_source_system_fk, object_id, object_name)
    (select 1 etl_source_system_fk, object_id, object_name from user_objects);
end;
/

不幸的是,上面的代码失败了ORA-14108: illegal partition-extended table name syntax。这很奇怪,因为这似乎是一个明显的用途 对于那种语法。

添加动态SQL会删除错误。

declare
    v_partition_value number := 1;
begin
    execute immediate '
    insert  /*+ APPEND PARALLEL("TMP_LOADING_TABLE") */     
    into tmp_loading_table partition for ('||v_partition_value||') (
      etl_source_system_fk, object_id, object_name)
    (select 1 etl_source_system_fk, object_id, object_name from user_objects)';
end;
/

我不熟悉Oracle Warehouse Builder,也不知道此解决方案是否适用于该环境。我假设在数据仓库中SQL注入不是问题。


在运行时指定分区名称的另一种方法是使用system partitioningDATAOBJ_TO_PARTITION

create table tmp_loading_table (
  etl_source_system_fk number not null enable,
  object_id number not null enable,
  object_name varchar2(30) not null enable
)
PARTITION BY SYSTEM
(
  PARTITION ess1,
  PARTITION ess2
);

declare
    v_object_id number;
begin
    select object_id
    into v_object_id
    from dba_objects
    where object_name = 'TMP_LOADING_TABLE'
        and subobject_name = 'ESS1';

    insert into tmp_loading_table
    partition (dataobj_to_partition (tmp_loading_table, v_object_id))
    values (1, 2, 'A');
end;
/

这种方法的最大缺点是每个DML都必须引用分区:

insert into tmp_loading_table
values (1, 2, 'A');

ORA-14701: partition-extended name or bind variable must be used for DMLs on tables partitioned by the System method

我从未听说过有人使用此功能。根据我的经验,Oracle数据磁带存在问题。那个动态SQL现在看起来怎么样? :)