Scriptella:如何从clob对象动态获取数据然后将其插入数据库?

时间:2013-03-25 16:04:59

标签: java etl scriptella janino

我是使用Scriptella的新手。

我的要求是这样的:

1)首先,我有一些非常大的xml文件,我必须从中将数据插入到数据库中。 因此,我决定将xml文件作为clob对象插入。这是我使用的语法:

<script connection-id="out" >
 insert into DUMMY_TABLE1 values(5, ?{textfile 'D:\Workspace\src\Menu_for_order.xml'})

已成功运行。

2)接下来,我想做 - 获取Clob数据&amp;然后将其解析为xpath查询,最后,将xpath字段下的文本值提取到数据库列中。

为此,我在查询块中写了一个java janino块,如下所示:

 <query connection-id="out">
  select data as "data" from dummy_table1
 <script connection-id="java">

      java.sql.Clob clob = (java.sql.Clob) get("data");

      org.xml.sax.InputSource inputSource = new org.xml.sax.InputSource(clob.getCharacterStream());
      javax.xml.xpath.XPath xpath = javax.xml.xpath.XPathFactory.newInstance().newXPath();
      java.lang.String xpathExpression = "CommunicationCenter/Response/MenuData/Menu/Noun";

      org.w3c.dom.NodeList nodes = (org.w3c.dom.NodeList) xpath.evaluate(xpathExpression, inputSource, javax.xml.xpath.XPathConstants.NODESET);
</script>

我的问题是 - 我必须将在“nodes”nodelist中提取的数据插入到数据库列中。

我该怎么做?

对于XML,我们可以在“query”块中编写Xpath表达式,然后,对于每个获取的xpath字段,我们可以将数据插入到DB中。

但是在这里,如果数据在Clob对象中,我如何从Xpath查询中提取数据? 我必须使用Java代码来获取Clob数据。但在那之后,我该如何插入数据 因为Scriptella还有另一个限制因素:

我们不能在脚本块中使用脚本。因为“get”只能在“script”块中使用,所以我必须在这里使用脚本标记。

但是,你会告诉我使用全局变量。但是还有另一个问题:我会申报多少全局变量? “节点”节点列表中有许多字段。所以不可能为每个字段声明全局变量,对吗??

任何人都可以给我一个暗示这个具体问题吗?你能告诉我是否可以使用Scriptella?

2 个答案:

答案 0 :(得分:1)

从问题来看,我不清楚您要将哪些数据插入到数据库列中。它是XML内容,还是从NodeList中提取的某些特定元素或属性值?我认为这是后者。脚本不能放在其他脚本中是正确的。您需要一个查询元素来将数据提供给内部元素。以下是如何实现这一目标的示例:

<query connection-id="out">
    select data as "data" from dummy_table1
   <query connection-id="java">
       java.sql.Clob clob = (java.sql.Clob) get("data");
       org.xml.sax.InputSource inputSource = new org.xml.sax.InputSource(clob.getCharacterStream());
       javax.xml.xpath.XPath xpath = javax.xml.xpath.XPathFactory.newInstance().newXPath();
      java.lang.String xpathExpression = "CommunicationCenter/Response/MenuData/Menu/Noun";

      org.w3c.dom.NodeList nodes = (org.w3c.dom.NodeList) xpath.evaluate(xpathExpression, inputSource, javax.xml.xpath.XPathConstants.NODESET);
      String someText = nodes.item(0).getTextContent();
      set("someText", someText); //Set variable for the inner script
      query.next(); //Executes inner script and make variables available to it
      <script connection-id="out">
          INSERT INTO TABLE VALUES(?someText);
      </script>
  </query>

答案 1 :(得分:0)

尝试在脚本代码中移动查询?并将您当前的脚本标记转换为(janino)查询?要在当前脚本标记中移动查询,您可能需要自己启动数据库连接。 HTH或希望给出了一些想法。