栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

安装sqoop

安装sqoop

链接:https://pan.baidu.com/s/1gIUy1VFzUBc-qWLEHs2CqQ 
提取码:5y91

上传sqoop到master的/home/hadoop目录


把sqoop压缩文件,解压到/usr/local中,使用以下命令

sudo tar -xvf sqoop-1.4.7.bin.__hadoop-2.6.0.tar.gz -C /usr/local


进入/usr/ local目录,使用以下命令:
 

cd /usr/local


将解压后的sqoop-1.4.7.bin__hadoop-2.6.0目录重命名为sqoop,使用以下命令:
 

sudo mv sqoop-1.4.7.bin__hadoop-2.6.0/ sqoop


授权地区用户hadoop拥有sqoop目录的所有者权限,使用以下命令:
 

sudo chown -R hadoop sqoop


进入sqoop安装目录下的conf目录,使用以下命令:

cd /usr/local/sqoop/conf/


重命名sqoop-env-template.sh为sqoop-env.sh,使用以下命令:
 

mv sqoop-env-template.sh sqoop-env.sh


编辑sqoop-env.sh,解注释23,26,29,32,35行,分别设置hadoop,hadoop, hbase, hive和zookeeper 的安装目录

export HADOOP_COMMON_HOME=/usr/local/hadoop
export HADOOP_MAPRED_HOME=/usr/local/hadoop
export Hbase_HOME=/usr/local/hbase
export HIVE_HOME=/usr/local/hive
export ZOOCFGDIR=/usr/local/zookeeper


进入sqoop安装目录下的bin目录, 使用以下命令:

cd /usr/local/sqoop/lib/


上传MySQL的驱动文件到lib目录
拷贝hive的jar文件到lib目录,使用以下命令:
 

cp /usr/local/hive/lib/hive-common-2.3.7.jar /usr/local/ sqoop/lib/


编辑环境变量文件,使用以下命令:
 

vim /home/hadoop/.bashrc


在环境变量文件最后添加以下内容:
 

export SQOOP_HOME=/usr/local/sqoop
export PATH=$PATH:$SQOOP_ HOME/bin


刷新环境变量, 使用以下命令:
 

source /home/hadoop/.bashrc


验证是否安装成功, 使用以下命令:
 

sqoop version


查看MySQL管理员的账户和密码,使用以下命令:
 

sudo cat /etc/ mysql/ debian.cnf


使用管理员账号和密码登录MySQL,使用以下命令:
 

mysql - u debian-sys-maint -p


创建sqoop数据库, 用来存储实验相关的表,使用以下命令:
 

CREATE DATAbase IF NOT EXISTS sqoop;


创建sqoop用户,设置密码为123456,使用以下命令:
 

CREATE USER 'sqoop'@'IDENTIFIED BY '123456';


授予sqoop用户操做sqoop数据库的权限,使用以下命令:
 

GRANT ALL PRIVILEGES ON sqoop.*TO 'sqoop'@'%';
FLUSH PRIVILEGES;


退出MySQL,使用以下命令:

exit


 

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/650420.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号