从宽列表中动态选择字段

时间:2018-09-20 02:19:50

标签: scala hadoop dynamic hive

我在HIVE中遇到的情况是,我从一个宽列表(大约有250个字段)中选择必填字段,并结合其他一些维表以仅创建具有某些过滤条件的必填字段的快照。

无论业务如何发展,并不断要求添加其他字段或某些字段,目前,我每次他们要求一个新字段时都在更改代码,这需要更长的时间进行测试,然后才能将其投入生产。有没有一种方法可以动态提供要在SELECT子句中使用的字段列表?还是有什么更好的方法来处理这种情况?感谢您的投入。

0 个答案:

没有答案