标签：function 函数 自定义 Hive UDF apache org

7. 函数

7.1 系统内置函数

• 查看系统自带的函数：show functions;
• 显示自带的函数的用法：desc function upper（函数名）;
• 详细显示自带的函数的用法：desc function extended upper;

7.2 自定义函数

• 根据用户自定义函数类别，分为以下三种：
  • UDF(User Defined Function):
    • 一进一出；
  • UDAF(User Defined Aggregation Function):
    • 聚合函数（多进一出），类似于：max/min等；
  • UDTF(User Defined Table Generating Function):
    • 一进多出，类似于：lateral view explore()；
• 自定义 UDF 的编程步骤：
  • 继承 org.apache.hadoop.hive.ql.UDF;
  • 需要实现 evaluate 函数； evaluate 函数支持重载；
  • 在 HIVE 的命令行窗口创建函数：
    • 添加 jar：add jar linux_jar_path;
    • 创建 function: create [temporary] function [dbname.]function_name AS class_name;
  • 在 HIVE 的命令行窗口删除函数：
    • Drop [temporary] function [if exists] [dbname.] function_name;
• 注意事项：UDF必须要有返回类型，可以返回 NULL，但是返回类型不能为 void；

7.3 自定义 UDF 函数

// 1. 创建一个 Maven 工程 Hive
// 2. 导入依赖
  <dependencies>
      <dependency>
          <groupId>org.apache.hive</groupId>
          <artifactId>hive-exec</artifactId>
          <version>1.2.1</version>
      </dependency>
      <dependency>
          <groupId>junit</groupId>
          <artifactId>junit</artifactId>
          <version>RELEASE</version>
      </dependency>
      <dependency>
          <groupId>org.apache.logging.log4j</groupId>
          <artifactId>log4j-core</artifactId>
          <version>2.8.2</version>
      </dependency>
      <!--lombok-->
        <dependency>
            <groupId>org.projectlombok</groupId>
            <artifactId>lombok</artifactId>
            <version>1.16.18</version>
        </dependency>
  </dependencies>
  <build>
        <plugins>
        <!--java 的编译版本 1.8-->
            <plugin>
                <groupId>org.apache.maven.plugins</groupId>
                <artifactId>maven-compiler-plugin</artifactId>
                <configuration>
                    <source>1.8</source>
                    <target>1.8</target>
                    <encoding>UTF-8</encoding>
                </configuration>
            </plugin>
        </plugins>
    </build>

// 3. 创建一个类

标签：function,函数,自定义,Hive,UDF,apache,org
来源： https://www.cnblogs.com/linkworld/p/11060589.html

本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享；
2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关；
3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关；
4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除；
5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。