栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

记录一次SparkSQL union all语法错误

记录一次SparkSQL union all语法错误

以前在数据库工具上执行Hive QL用到union all时
直接这样写即可

select a
union all
select b
union all
select c

但是换到SparkSQL中执行却提示错误
diagnostics: User class threw exception: org.apache.spark.sql.catalyst.parser.ParseException:
mismatched input ‘union’ expecting (line 18, pos 0)

后面查了查资料后发现,Hive中对union all的语法有一下要求

  1. union all 的每张表都要用简称命名,否则报错
    例如:
    select * from a_1 t1
    union all
    select * from a_2 t2
  2. union all的每张表都不支持limit、order by等函数,否则报错
    例如:
    select * from (select * from a_1 t1 order by XXX limit n) x1
    union all
    select * from (select * from a_2 t2 order by XXX limit n) x2

参考资料:
https://www.jianshu.com/p/f59cdb3bcdb6

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/316420.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号