[转]Hive实现Oracle wm_concat函数

nfsz1s9222

工作中遇到将Hive数据组装同步到MongoDB的需求。

于是乎，传统的DB设计结构就遇到了难题，因此需要有个向WM_CONCAT的函数来将列转行。

还好有现成的解决方案，否则又要自己码一个UDAF处理函数。

• hive> desc t;   
  
• OK   
  
• id      string   
  
• str     string   
  
• 
  Time taken: 0.249 seconds   
  
• 
  hive> select * from t;   
  
• OK   
  
• 1       A   
  
• 1       B   
  
• 2       C   
  
• 2       D   
  
• 
  Time taken: 0.209 seconds  
  

hive> desc t;
OK
id      string
str     string
Time taken: 0.249 seconds
hive> select * from t;
OK
1       A
1       B
2       C
2       D
Time taken: 0.209 seconds
　　在Hive0.9中，可用：
　　SELECT id,
concat_ws('|', collect_set(str))
FROM t 
GROUP BY id;
　　得到结果：
　　
　　1 A|B
　　2 C|D
　　
　　目前在Hive0.11.0里面测试，能够顺利使用。
　　refer to http://superlxw1234.iyunv.com/blog/1886846