栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

aws athena 建hive表命令不对,向表中插入数据时引发错误

aws athena 建hive表命令不对,向表中插入数据时引发错误

EMR集群,向hive表中插入数据时,引发错误:
org.apache.spark.sql.AnalysisException: Can not create a Path from an empty string


网上搜索不到解决方案,最终偶然发现了问题所在,记录如下:
1. 这是有问题的表,导出DDL是如下的:


实际我的建表命了,并没有指定任何参数,上面看到的参数是默认产生的:
CREATE EXTERNAL TABLE `dwt_ob_video_all_user` (
 `uid` string,
 `first_login_time` int,
 `last_login_time` int)
LOCATION
 '/root/db/rec/dwt_ob_video_all_user'

2.重新创建可以正常插入记录的表:
建表命令如下:
CREATE EXTERNAL TABLE `dwt_ob_video_all_user` (
 `uid` string,
 `first_login_time` int,
 `last_login_time` int)
ROW FORMAT SERDE
 'org.apache.hadoop.hive.ql.io.parquet.serde.ParquetHiveSerDe'
STORED AS INPUTFORMAT
 'org.apache.hadoop.hive.ql.io.parquet.MapredParquetInputFormat'
OUTPUTFORMAT
 'org.apache.hadoop.hive.ql.io.parquet.MapredParquetOutputFormat'
LOCATION
 '/root/db/rec/dwt_ob_video_all_user'
TBLPROPERTIES (
 'parquet.compression'='lzo')


 

 

 

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/761540.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号