大数据知识_大数据学习笔记

问题描述：主节点jps出现datanode 从次节点jps没有datanode。 原因可能是多次进行格式化format出现的值不对位。 解决方案：....

首先需要了解到云迁移流程：前期调研-制定方案-迁移-运营。 这里主要介绍的是如何解决迁移过程中的难点。 我从这个问题中看....

一、搭建本地环境 1、下载准备两个工具 Hadoop-2.7.3.tar.gz Hadoop-2.7.3-winutils.exe.rar 2、将Hadoop-2.7.3-winutils.e....

kafka生产调优手册 一、Kafka 硬件 配置选择 1、场景说明 2、服务器台数选择 3、磁盘选择 4、内存选择 Kafka 内存组成：....

hive的语法和sql语法大部分是是相同的，下面我们来挨个写出来： 1，简单介绍存储原理： hive和hdfs交互，以及和本地linux交....

#Ubunutu16.04完成Hadoop集群式搭建 版本情况 VMwareWorkstation 12.5 JDK1.8.0_321 HADOOP-2.7.1 hadoop分布式工作机制说明....

文章目录 0. 前情提要1. 解决方案2. 系统环境3. 问题描述4. 问题分析5. 解决思路6. 仍存在的问题参考资料 0. 前情提要 在服....

这里进入HBase的javaAPI章节进行学习，这里我会非常详细的讲述如何创建连接和基础的使用，以及一个小项目的学习。跟随着我往....

面对学校课程要求学生搭建自己的伪分布式模式，所面临的各种坑，亲自踩坑。 1. 安装环境ubuntu 2.安装jdk 3.安装Hadoop 1.在....

RabbitMQ 保证消息可靠性传输 消息可靠性问题解决消息可靠性问题生产者到 Queue 阶段消息丢失Queue 到消费者阶段消息进入消....

实现MySQLHDFS;MySQLHive;HiveHDFS;HDFSMySQL的数据迁移 一. Apache Sqoop介绍二.Sqoop安装2.1安装Sqoop2.2解压Sqoop2.3配置....

离线数据平台通常和 Hadoop Hive 、数据仓库、 ETL 、维度建模、 数据公共层等联系在一起。 离线数据平台的另一个关键技术是....

kafka初学 一、介绍 Kafka是是一个分布式、支持分区的（partition）、多副本的（replica），基于zookeeper协调的分布式消息....

Dubbo与Spring的整合原理与流程分析 看Dubbo整合Spring的使用， 几个注解就结束了，但是内部运作原理一概不知， 框架内部报....

医疗器械产业是生物工程、电子信息和医学影像等高新技术领域复合交叉的知识密集型、资金密集型产业。作为关系到人类生命健康....

2022年2月28日，我将我改了4遍的简历上传至boss上，还没开始投递，但收到来自百度的hr消息，于是发了一下简历，没过几天便来....

目录 前言 关键字 DAG（有向无环图） 概念 DAG 解决了什么问题 工作流程 Cache 缓存 为什么要用cache cache的使用 注意点 ca....

上次的百度面试遇到了关于spark的并发数的问题，今天我们就来将这些问题都一并解决一下，图画的的有点丑，还行大家见谅，....

系列文章目录 准备篇 RabbitMQ安装文档 第一章 RabbitMQ快速入门篇 第二章 RabbitMQ的Web管理界面详解 第三章 RabbitMQ进阶....

pandas使用shift函数对数数据进行向上偏移（-1）或者向下偏移（1）、索引不移动，移动之后无值的赋值为NaN、将原数据列与偏....