大数据知识_大数据学习笔记

1.确保Hadoop服务开启，在打开mapred-site.xml添加如下配置，我的hadoop版本为2.7.1 mapreduce.jobhistory.addresshadoop105....

安装kafka单机版 kafka是基于Scala开发，需要java的运行环境， 所以首先要确保已经安装配置好java环境 kafka自带集成了zooke....

1、查看数据库 2、创建数据库，db_hive为数据库名； 显示创建后的数据库  创建数据库db_hive2,并指定在HDFS上的存储位....

目录  一.目的  1.想：提高学习效率，所以将老师的内容记录下来 二.参考  1.SIKI学院 三.注意   1.课程资源下载 1.MySQ....

导读：在互联网公司中，业务迭代快，系统变更频繁，初期都是刀耕火种。但随着系统复杂度不断增加，系统稳定性问题会凸显出来....

文章目录 HDFS-服役新服务器1 环境准备2 服役新节点具体步骤2.1 启动hadoop104 dataNode2.2 启动hadoop104 nodeManager2.3 ....

前言： 前文讲述了server端处理会话创建请求的全过程，相对于客户端发送请求处理而言，服务端主要是监听READ事件，根据不同....

转载本文需注明出处：微信公众号EAWorld，违者必究。 近期我们发布了主数据 7.0 GA 版本，今天借本文分享和介绍一下普元的主....

简介 作为一个数据开发工程师，hive sql是我们必备的技能，好的hql语句让我们事半功倍。 列裁剪 所谓列裁剪就是在查询时只读....

Flink在9月份发布了最新版Flink1.14.0，新版本中 Flink 一个主要变化是集成的流媒体和批处理体验，此外，在 SQL API、更多连....

学习Dubbo: Zookeeper部署 ./zkServer.sh start-foreground 启动报错 通过./zkServer.sh start-foreground查看报错信息： [....

文章目录 1.资料下载2.大数据介绍2.1什么是大数据？2.2为什么要学习大数据?2.3大数据相关技术2.4海量数据存储2.5海量数据清....

1、上传并解压 tar -zxvf sqoop-1.4.6.bin__hadoop-2.0.4-alpha -C /usr/local/soft/ 2、修改文件夹名字 mv sqoop-1.4.6.bin....

core-site.xmlfs.defaultFShdfs://haclusterhadoop.tmp.dirfile:///opt/soft/hadoop260/tmpio.file.buffer.size4096ha.zookeeper

数据分析基础 数据分析是用适当的统计分析方法对搜集来的数据进行进一步分析和理解，提取有用信息并形成相应的结论，对数据....

第一次课笔记 成绩分布 统计基础 20传统机器学习 20深度学习 20presentation 40 大数据导论 大数据的产生：网络世界、物理世....

文章目录 Hive安装部署Hive元数据配置到MySQL拷贝驱动 启动Hive初始化元数据库启动Hive客户端 Hive安装部署 （1）把apache....

同事最近在用大数据可视化系统设计东西，但被分享这个问题难住了，不知道要怎么分享出去让领导看到他的成果，无奈之下他向我....

一、问题分析： 1、mysql导入hive 数值类型变成null的问题 mysql中没有boolean类型，boolean在MySQL里的类型为tinyint(1), ....

** centos 7 / 8 通过修改网络配置文件 ifcfg-ens33来设置静态IP ** ifcfg-ens33所在的目录 /etc/sysconfig/network-scripts....