Hive中实现有序，有序concat拼接，有序集合，hive方法操作命令，与自带方法列表

前言

记得以前用过这个函数，这次开发怎么都找不到了，不常用的原因，也是笔记没做好

方法一

• GROUP_CONCAT(distinct id ORDER BY id DESC SEPARATOR ‘_’)

好像是用过的
这个报错：Invalid function GROUP_CONCAT
可能是版本问题：当前hive版本：hive-common-2.1.1-cdh6.2.0
                              apache-hive-1.2.1-也没有这个函数
                              1.2.2也没有
我记错了，吧

其他

• CONCAT(‘My’, NULL, ‘QL’)
• CONCAT_WS(’,’,‘First name’,NULL,‘Last Name’)
• CONCAT_WS(SEPARATOR ,collect_set(column))

方法二

• concat_ws(’,’,sort_array(collect_set(concat(content_id,’#&’,SCORE))))

缺点是不支持倒序

方法三

• 自定义udf

方法四 变通

• concat_ws(’,’,sort_array(collect_set(concat(1-score,’#&’,content_id,’#&’,SCORE)))) item_score
• 采用序号，row_numbet

后续

hive 方法 查看 添加 删除

• hive 函数大全当前版本
• 发现个问题，注册的udf 删不了了

show functions;
desc function !;
show functions like '*concat*';
drop temporary function ****;

读文件3种方式

1.for line in `cat functions.txt`; do echo "desc function '${line}';"  >> asdf.txt; done

2.
for line in `cat functions.txt`
do
  echo ${line}
done

3.
cat functions.txt | while read line
do
  echo $line
done

4.
while read line
do
  echo $line
done < functions.txt

* 时有问题，当前目录下文件

desc function 'app3.0.log'
desc function 'application_1577181410627_109940.log'
desc function 'asdf.txt'
desc function 'data'
desc function 'dealer.sh'
desc function 'flume'
desc function 'functions.txt'
desc function 'qwer.txt'
desc function 'showallfuncs.sh'
desc function 'sqoop'
desc function 'test'
desc function 'test.sh'
desc function 'wxapp_kafka.log'
desc function 'wxapp_sqlserver_open.sh

hive 自带函数

• 当前版本250个 有3个函数描述文件跨行 高亮标出

最后

以上就是故意海燕为你收集整理的Hive中实现有序，有序concat拼接，有序集合，hive方法操作命令，与自带方法列表的全部内容，希望文章能够帮你解决Hive中实现有序，有序concat拼接，有序集合，hive方法操作命令，与自带方法列表所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错，欢迎将靠谱客网站推荐给程序员好友。