`
dacoolbaby
  • 浏览: 1255070 次
  • 性别: Icon_minigender_1
  • 来自: 广州
社区版块
存档分类
最新评论

[转]Hive实现Oracle wm_concat函数

    博客分类:
  • Hive
阅读更多
工作中遇到将Hive数据组装同步到MongoDB的需求。
于是乎,传统的DB设计结构就遇到了难题,因此需要有个向WM_CONCAT的函数来将列转行。
还好有现成的解决方案,否则又要自己码一个UDAF处理函数。
  1. hive> desc t;   
  2. OK   
  3. id      string   
  4. str     string   
  5. Time taken: 0.249 seconds   
  6. hive> select * from t;   
  7. OK   
  8. 1       A   
  9. 1       B   
  10. 2       C   
  11. 2       D   
  12. Time taken: 0.209 seconds  
hive> desc t;
OK
id      string
str     string
Time taken: 0.249 seconds
hive> select * from t;
OK
1       A
1       B
2       C
2       D
Time taken: 0.209 seconds

在Hive0.9中,可用:

SELECT id,
concat_ws('|', collect_set(str))
FROM t 
GROUP BY id;

得到结果:

 

1 A|B

2 C|D

 

目前在Hive0.11.0里面测试,能够顺利使用。

refer to http://superlxw1234.iteye.com/blog/1886846

分享到:
评论

相关推荐

Global site tag (gtag.js) - Google Analytics