Thinbug
News
如何对大数据进行复杂查询?
时间:2014-12-01 14:51:46
标签:
hadoop
hive
每一个人。 我在hdfs中有一些关于6G的数据已经从mysql导出了。我已经写了mapreduces预处理数据来填充一些关键字段,可以很容易地查询数据。 由于业务需求是按日,小时,医院,区域等不同的聚合数据组, 所以我必须编写许多hive sqls将数据导出到本地磁盘,然后我编写python脚本来解析本地磁盘上的文件,然后根据需要获取数据。
在hadoop上有一些好的技巧可以解决我的需求。我在考虑。 请帮帮我。
0 个答案:
没有答案
相关问题
如何在ServiceStack.OrmLite中查询复杂数据?
寻找大而复杂的样本数据
如何在Google Big Query上更新大表
如何做这样的复杂查询
大表上的复杂查询
如何对大数据进行复杂查询?
关于mongodb数据的复杂查询
查询大查询数据
处理大数据中的复杂连接
如何在Google Big Query的特定范围内的多个日期进行查询
最新问题
我写了这段代码,但我无法理解我的错误
我无法从一个代码实例的列表中删除 None 值,但我可以在另一个实例中。为什么它适用于一个细分市场而不适用于另一个细分市场?
是否有可能使 loadstring 不可能等于打印?卢阿
java中的random.expovariate()
Appscript 通过会议在 Google 日历中发送电子邮件和创建活动
为什么我的 Onclick 箭头功能在 React 中不起作用?
在此代码中是否有使用“this”的替代方法?
在 SQL Server 和 PostgreSQL 上查询,我如何从第一个表获得第二个表的可视化
每千个数字得到
更新了城市边界 KML 文件的来源?