使用场景

SQL的行转列功能在处理大数据时非常有用，尤其是当我们需要将一些行数据转换为列数据以便进行更深入的分析和处理。

注意事项

在使用行转列功能时，需要注意数据的类型和结构，以确保转换的正确性。同时，由于这种转换可能会消耗大量的计算资源，因此在处理大数据时需要特别注意性能优化。

使用方法

• 在HiveSQL中，可以使用to_map函数（无序）
• 在PrestoSQL中，可以使用map_agg函数（无序）
• 在HiveSQL中，可以使用collect_list和collect_set函数（无序）
• 在HiveSQL中，可以使用group_concat函数（有序）

使用示例

诉求1：如需将表1中的数据变换成表2中的形式，有如下实现方式。

• 在HiveSQL中的实现代码如下

SELECT
  uid,
  kv['c1'] AS c1,
  kv['c2'] AS c2,
  kv['c3'] AS c3
FROM (
  SELECT uid, to_map(key, value) kv
  FROM vtable
  GROUP BY uid
) t

• 在PrestoSQL中的实现代码如下

SELECT
  uid,
  kv['c1'] AS c1,
  kv['c2'] AS c2,
  kv['c3'] AS c3
FROM (
  SELECT uid, map_agg(key, value) kv
  FROM vtable
  GROUP BY uid
) t

诉求2：如需将表1中的数据变换成表2中的形式，有如下实现方式。

SELECT user_key,
       collect_list(order_key) order_key_list,  
       collect_set(order_key) order_key_set
  FROM vtable
GROUP BY user_key

解释：按一个字段group分组，对另一个字段聚合成为一个数组。

• collect_list ：对结果不去重，
• collect_set：对结果去重，

诉求3：如需将表1中的数据按照排名顺序变换成表2中的形式，有如下实现方式（有序组合）

SELECT key, 
     group_concat(value, ",", rank)
FROM vtable 
GROUP BY key