栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

HDFS文件映射成Hive外部表的注意事项

HDFS文件映射成Hive外部表的注意事项

hdfs文件映射生成hive外部表时,本质是文件的序列化和反序列化

ALTER TABLE XXX 
ADD IF NOT EXISTS PARTITION(event_day='{YESTERDAY}') 
LOCATION 'HDFS路径';

需要注意两点:

1. hdfs文件和hive表的存储格式必须一致,如果hdfs是text格式,hive表是orc格式,数据关联不上,映射不过来

2. hdfs文件和hive表的分隔符必须一致,否则解析错误,hive的分隔符需要注意t和01(对应代码里的x01)

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/719216.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号