栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 软件开发 > 后端开发 > Java

Hive UDF函数扩展实现步骤

Java 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

Hive UDF函数扩展实现步骤

Hive自定义函数中主要分为三类UDF函数(一进一出)、UDAF聚合函数(多进一出)、UDTF表生成函数(一进多出)

1. 编写一个Java类,继承UDF类,并重载evaluate方法。方法中实现函数的逻辑(可以在一个Java类中实现多个函数)。

2.  把程序打包成Jar,上传到HiveServer所在机器或者HDFS上。

3.  客户端命令行中添加Jar包到Hive的classpath中,可以直接放到${HIVE_HOME}/lib中

    hive> add Jar  /xxx/xxx/xxx.jar   命令格式

4. 注册成为临时函数或永久函数。

    --  临时函数 

    create temporary  function 函数名 as 'UDF类全路径'

    --  永久函数(需要上传Jar包到hdfs上)

CREATE FUNCTION 函数名 AS 'UDF类全路径'  USING JAR 'hdfs://xxx/xxx/xxx.jar';

5. 开始使用函数

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/302197.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号