我的文件包含id
和year
。我的字段由,
和.
分隔。我可以使用,
和.
取代已被终止的字段吗?
答案 0 :(得分:1)
这可以使用RegexSerDe。
hive> CREATE EXTERNAL TABLE citiesr1 (id int, city_org string, ppl float)
ROW FORMAT SERDE 'org.apache.hadoop.hive.serde2.RegexSerDe'
WITH SERDEPROPERTIES ('input.regex'='^(\\d+)\\.(\\S+),(\\d++.\\d++)\\t.*')
LOCATION '/user/it1/hive/serde/regex';
在正则表达式中,定义了三个正则表达式组。
(\\d+) leading digits is the int id column
dot . is a separator
(\\S+) - string without spaces is the city_org string column
comma , is a separator
(\\d++.\\d++) - float column
\\t - tab separator