hadoop学习笔记整理(二)

1. 安装mysql
  1. 下载mysql(linux)安装包
  2. 将其上传到linux
  3. 将其解压到/opt/moudule tar -xf 解压文件 -C 解压到的位置
  4. 安装对应的rpm文件（（1）删除原来的mysql （2）测验虚拟机能否上网（ping www.baidu.com）（3）获取插件yum install – y libaio（4）依次执行命令:按顺序执行
  5. 删除指定文件 var/lib/mysql rm -rf *
  6. 初始化mysql:
    1. 重置mysql:mysqld --initialize --user=mysqL
  7. 查看随机生成的密码cat/var/log/
  8. 登录mysql服务 systemctl start mysqld
  9. 登录mysql:mysql -uroot -p
2. 安装hive
  1. 下载安装包:apache-hive-3.1.2-bin.tar.gz
  2. 上传到/opt/software
  3. 解压tar -zxvf apache-hive-3.1.3-bin.tar.gz -C /opt/module/
  4. 修改系统变量 /etc/profile添加内容
  5. 保存source /etc/profile
  6. 修改hive 环境cd /opt/software/apache-hive-3.1.3-bin/bin/ 回车后 vi hive-config.sh
  7. 拷贝hive配置文件:cd /opt/software/apache-hive-3.1.3-bin/bin/conf/回车 cp hive -default.xml.template hive-site.xml
  8. 修改hive配置文件
  9. 上传mysql 驱动包mysql-connector-java-8.0.15.zip到/opt/software/apache-hive-3.1.3-bin/lib
  10. 确保mysql数据库里有名称为hive 的数据库，然后初始化元数据库 scheatool – dbTybe mysql – initSchema
  11. 确保hadoop启动然后启动hive 命令：hive 然后检测是否启动成功 show databases;
Zookeeper安装
1. 解压 1. Cd opt/ module tar -zxvf apache-zookeeper-3.5.5-bin.tar.gz
2. 创建数据文件和目录文件在zookeeper的根目录下创建两个文件夹data和log
3. 拷贝配置文件配置文件与更改 cp zoo_sample.cfg zoo.cfg
4. 配置服务器myid
5. 集群拷贝
6. 集群myid更改进入每一个节点更改myid的值
7. 进入每一个节点启动集群
Hbase安装
1. 修改启动系统变量
  1. 系统环境变量增加
  2. 保存系统环境变量
  3. 修改hbase变量
2. 配置文件
  1. 配置hbase-site.xml文件命令:vi hbase-sire.xml
3. 启动
  1. 依次启动 zookeeper Hadoop hbase
  2. Hbase的启动命令：start -hbase.sh
4. 检查
  1. 命令jps:查看
5. Habse shell
  1. 查看状态：status
  2. 查看所有表：list
  3. 退出：quit

hadoop学习笔记整理(二)

大数据系统相关栏目本月热门文章