栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

hive如何取出数据的前几个元素

hive如何取出数据的前几个元素

今天遇到个问题,例如

select

company_name,concat_ws(',',collect_set(contract_num)) contract_nums

from table

group by contract_num

如果这个contract_nums数量有100个,我只显示5个。

那么怎么办呢?

1.基础版

select concat_ws(",",
	array(
		array('1','2','3','4','5','6','7','8','9','10','11')[0],
		array('1','2','3','4','5','6','7','8','9','10','11')[1],
		array('1','2','3','4','5','6','7','8','9','10','11')[2],
		array('1','2','3','4','5','6','7','8','9','10','11')[3],
		array('1','2','3','4','5','6','7','8','9','10','11')[4] 
	)
)

2.函数版

 

select substring_index(concat_ws(",",array('1','2','3','4','5','6','7','8','9','10','11')),',',5)

3. row_number 版本

select 
company_name ,concat_ws(",",collect_list(contract_num))contract_nums
from (
select company_name,contract_num,
row_number() over(partition by company_name) rn 
from (
select 'cclovezbf' as company_name, array('1','2','3','4','5','6','7','8','9','10','11') contract_nums
)t lateral  view explode(contract_nums) tmp as contract_num
)t 
where rn <5
group by company_name 

这个直接跑不出来,报错 IllegalArgumentException Size requested for unknown type: java.util.Collection:

因为collect_list()这个函数和sum 有点不一样,好像是实现类的方法种要计算元素的个数,换成sum也差不多可以看结果了。

上述只是提供思路,实际执行还是看个人

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/746178.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号