
先弄明白自己读源码的目的。 通常情况下从源码里边去寻找问题的答案,是最靠谱的。从源码中,去学习代码组织方式,对于一些....
文章目录 1.HDFS概述1.1 HDFS产生背景1.2 HDFS优点1.3 HDFS缺点1.4 HDFS组成架构1.5 HDFS文件块大小(面试重点) 2. HDFS的Sh....
写在前面 基本都是从网上solo来的题目,也有一些平时看到感觉会被问的整理进去的题目主要为了毕业面试…… NLP/机器学习方向....
1️⃣创建一个 DataFrame import numpy as npimport pandas as pddata = [{'a':1,'b':2},{'a'....
进入容器执行 rabbitmq-plugins enable rabbitmq_management 重启 docker restart rabbit(容器name或者容器id)
前因后果 因为集群节点磁盘容量不足,于是计划对 HBase 集群进行节点扩充,扩充完,也执行了数据均衡,刚开始暂时未发现问题....
一般集群所需要的到底是什么环境?,需要明白的一件事,集群是由一个个单例服务通过各个单例服务之间的socket通信,从而规避....
目录 当我们谈论批流一体,我们在谈论什么?一、流计算与批计算 一)流计算与批计算二)流计算与批计算的比较三)为什么要....
零、引言 要说过去几年技术行业的 buzzword,那非『云原生』莫属,随着 Docker、Kubernetes 等技术的兴起,云原生时代的操作....
#查看集群状态 http://ip:9200/_cluster/health?pretty { "cluster_name": "test-es", //集群名称 "status": "gr....
文章目录 一、安装 Hive1. 解压安装包2. 配置环境变量 二、配置 Hive1. 配置 hive-site.xml 文件2. 复制 mysql 驱动程序3. ....
报错情况 首次安装并进入HBase后,会遇到这种问题: [root@zhiyong2 /]# hbase shellSLF4J: Class path contains multiple S....
PaddleSpatial是基于百度飞桨深度学习框架开发的时空大数据计算工具和平台,融合了百度领先的区域分割、时间序列、城市迁移....
sparkCore_01_A MapReduce 存在的缺陷 编写难度大不能很好充分利用系统内存一个作业多个MR任务嵌套不友好(每一次都要涉及磁....
概括: 检查一下datanode是否都变成了Unhealth Node 今天在写shell脚本的时候,里面用到了hive的函数,执行后发现一直卡在k....
Flink的运行架构 一、Flink的架构二、Flink运行时的组件1.作业管理器(JobManager)2.任务管理器(TaskManager)3.资源管理....
当我们在用java API将数据写入HBase时,如果遇到了Connection连接对象一直未null的情况,很有可能是当前系统的用户对HBase中....
项目场景: 使用Kettle 整合不同Mysql数据库数据,批量插入Clickhouse 问题描述 Kettle 任务执行过程中,出现偶发性失败 报....
目的(痛点): Elasticsearch 同集群、不同集群间索引的复制,按检索条件复制索引文档,备份索引数据等。 方....
Zookeeper 一个典型的分布式数据一致性的解决方案,分布式应用程序可以基于它实现诸如数据发布/订阅、负载均衡、命名服务....