栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

大数据组件-hdfs 常用命令

大数据组件-hdfs 常用命令

使用shell脚本导出数据库中的数据,上传至HDFS中
mysql -u'user' -p'xxxx' -h 'host-ip' -e "select fuid,uid from video.follower_00"
运行脚本
sh collect_data_full.sh
sh collect_data_incr.sh
查看数据命令
hdfs dfs -ls /user/cdh/ods

hdfs dfs -cat /user/cdh/ods/user/20210413/part-m-00000 | head -1

hdfs dfs -cat /user/cdh/ods2/user/20210413/part-m-00000 | head -1

hdfs dfs -ls /user/cdh/ods/user_order/20210413

hdfs dfs -cat /user/cdh/ods/user_order/20210413/part-m-00000 | head -1

hdfs dfs -cat /user/cdh/ods2/user_order/20210413/part-m-00000 | head -1
转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/674100.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号