(背景:我们正在运行使用Oracle Warehouse Builder构建的数据仓库。最近,我们开始收到很多“ORA-02049:等待锁定时分布式事务超时”错误。原因是我们'并行地重新运行多个ETL作业,并且每个作业都在我们的临时表中执行INSERT /*+APPEND PARALLEL*/
。此临时表由源系统ID分区。)
我想知道是否可以在运行时为INSERT指定分区键。 假设我有一张桌子
create table tmp_loading_table (
etl_source_system_fk number not null enable,
object_id number not null enable,
object_name varchar2(30) not null enable
)
PARTITION BY LIST ("ETL_SOURCE_SYSTEM_FK")
(PARTITION "ESS1" VALUES (1),
PARTITION "ESS2" VALUES (2)
);
然后我可以使用
插入特定的分区insert /*+ APPEND PARALLEL("TMP_LOADING_TABLE") */
into tmp_loading_table partition(ESS1) (
etl_source_system_fk, object_id, object_name)
(select 1 etl_source_system_fk, object_id, object_name from user_objects);
但这需要我对分区名称进行硬编码。
由于我们的OWB映射是通用的(它们将源系统ID作为参数),我想在运行时提供分区名称,例如
insert /*+ APPEND PARALLEL("TMP_LOADING_TABLE") */
into tmp_loading_table partition(:partition_name) (
etl_source_system_fk, object_id, object_name)
(select 1 etl_source_system_fk, object_id, object_name from user_objects);
这可能吗?如果没有,是否有另一种方法可以通过Oracle Warehouse Builder实现这一目标?
答案 0 :(得分:2)
PARTITION FOR
语法和动态SQL可以提供帮助。
理想情况下就是这么简单:
declare
v_partition_value number := 1;
begin
insert /*+ APPEND PARALLEL("TMP_LOADING_TABLE") */
into tmp_loading_table partition for (v_partition_value) (
etl_source_system_fk, object_id, object_name)
(select 1 etl_source_system_fk, object_id, object_name from user_objects);
end;
/
不幸的是,上面的代码失败了ORA-14108: illegal partition-extended table name syntax
。这很奇怪,因为这似乎是一个明显的用途
对于那种语法。
添加动态SQL会删除错误。
declare
v_partition_value number := 1;
begin
execute immediate '
insert /*+ APPEND PARALLEL("TMP_LOADING_TABLE") */
into tmp_loading_table partition for ('||v_partition_value||') (
etl_source_system_fk, object_id, object_name)
(select 1 etl_source_system_fk, object_id, object_name from user_objects)';
end;
/
我不熟悉Oracle Warehouse Builder,也不知道此解决方案是否适用于该环境。我假设在数据仓库中SQL注入不是问题。
在运行时指定分区名称的另一种方法是使用system partitioning 和DATAOBJ_TO_PARTITION 。
create table tmp_loading_table (
etl_source_system_fk number not null enable,
object_id number not null enable,
object_name varchar2(30) not null enable
)
PARTITION BY SYSTEM
(
PARTITION ess1,
PARTITION ess2
);
declare
v_object_id number;
begin
select object_id
into v_object_id
from dba_objects
where object_name = 'TMP_LOADING_TABLE'
and subobject_name = 'ESS1';
insert into tmp_loading_table
partition (dataobj_to_partition (tmp_loading_table, v_object_id))
values (1, 2, 'A');
end;
/
这种方法的最大缺点是每个DML都必须引用分区:
insert into tmp_loading_table
values (1, 2, 'A');
ORA-14701: partition-extended name or bind variable must be used for DMLs on tables partitioned by the System method
我从未听说过有人使用此功能。根据我的经验,Oracle数据磁带存在问题。那个动态SQL现在看起来怎么样? :)