栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

让分区表和数据产生关联的三种方式

让分区表和数据产生关联的三种方式

如果是自己创建目录,不以正常方式加载数据,则分区表和数据不关联

[atguigu@Hadoop102 data]$ hadoop fs -mkdir /user/hive/warehouse/dept_par/day=2020-10-29

让分区表和数据产生关联的三种方式 :

(1)方式一:上传数据后修复

上传数据

[atguigu@Hadoop102 data]$ hadoop fs -put dept1.txt /user/hive/warehouse/dept_par/day=2020-10-29

执行修复命令

hive (default)> msck repair table dept_par;

 (2)方式二:上传数据后添加分区

上传数据

[atguigu@Hadoop102 data]$ hadoop fs -put dept1.txt /user/hive/warehouse/dept_par/day=2020-10-30

执行添加分区

hive (default)> alter table dept_par add partition(day='2020-10-30');

(3)方式三:load 数据到分区 

load会改变元数据,因此让分区表和数据产生关联

hive (default)> load data local inpath '/opt/module/hive/datas/dept_20200401.log' into table dept_partition2 partition(day='20200401',hour='15');

使用三种方式可以用查询到新建目录下的数据 

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/742737.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号