使用talend BigData将半结构化数据转换为结构化数据

Question

Employee
 Employee Type                          : 0130
 Unit                                   : 4189670095711234
 Basic Salary                           : 11.00
 Joined Date                            : 04/12/yy 06:30:05
 Country                                : 826-United Kingdom

(123.66)                      --- Endof Employee -------------

R 4567 ABCD             -> Len f---- i 01/14

Employee
 Employee Type                          : 0120
 Unit                                   : 4189670095711234
 Basic Salary                           : 11.00
 Joined Date                            : 04/12/yy 06:30:05
 Country                                : 826-United Kingdom

(123.66)-                      --- Endof Employee ------------

R 4567 ABCD             -> Len f---- i 01/14

Employee
 Employee Type                          : 0130
 Unit                                   : 4189670095711235
 Basic Salary                           : 11.00
 Joined Date                            : 04/12/yy 06:30:05
 Country                                : 826-United Kingdom

(123.66)                      --- Endof Employee -------------

您好，

我想使用talend将以下半结构化数据转换为结构化数据。

请让我知道如何将数据转换为结构化表单，以便我可以将其插入到关系表中。

Answer 1

这是一个解决方案，感谢tPivotToColumnsDelimited组件。

tFileInputDelimilted与2个字段模式（nammed属性和值）相关联，并且有一个特殊的字段分隔符，它是＆＃34; ：＆＃34; （空间 - 冒号空间）。
Avanced设置选项＆＃34;修剪所有列＆＃34;和＆＃34;根据模式检查每个行结构＆＃34;打勾。

tMap是根据＆＃34;属性＆＃34;来关联每个输入行的排名。名称： 如您所见，序列名称基于属性名称，因此同一员工的每个文件记录将具有相同的等级值。

最后，tPivotToColumnsDelimited在一行上移动所有具有相同等级值的输入记录，最重要的是，值与rigth属性相关联。 设置＆＃34; Pivot列＆＃34; as＆＃34; property＆＃34;，＆＃34; Aggregation column＆＃34; as＆＃34; value＆＃34;，＆＃34;聚合函数＆＃34; as＆＃34; first＆＃34; ＆＃34; Group by＆＃34; as＆＃34; rank＆＃34;。选择所需的输出文件名，最后您将获得所需的结果：

希望这会有所帮助。