想写这篇文章很久了，主要原因有以下几方面，首先在工作中，经常接触到刚入职场的新人，刚毕业的大学生或者刚工作一两年的职....
Flink 问题排查 - 作业部署失败 现象：作业无法正常提交与启动 可能成因 确认方法 解决措施 程序包依赖与集群依赖存在版....
目录 1 数据模型 1.1 相关名词概念 1.2 模型分析 2 Hbase Shell操作 2.1 命名空间 2.2 表操作 2.2.1 创建表 2.2.2 更改表结....
导读 随着互联网的不断发展，企业积累的数据越来越多。当单台数据库难以存储海量数据时，人们便开始探索如何将这些数据分散....
Spark中最基本的数据抽象是RDD。 RDD（Resilient Distributed Dataset） 为弹性分布式数据集。 RDD 的特性 一组分区对于每个....
今天在跑wc的时候，代码仔细确认很多遍没有问题，但就是一直报错如下： Exception in thread "main" java.lang.RuntimeE....
文章目录 python笔记Python的介绍Python开发环境搭建Python的交互界面几个概念基本语法字面量和变量变量和标识符数据类型 ....
1. 简介 1.1 特点 Kafka 是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统，常见可以用于web/....
mv elasticsearch-6.2.4/ elasticsearch 进入目录 cd elasticsearch 新建目录 mkdir data mkdir logs 修改配置 cd config vi....
Spark SQL小文件 小文件是指文件大小显著小于hdfs block块大小的的文件。过于繁多的小文件会给HDFS带来很严重的性能瓶颈，对....
启动 Centos 7 系统。输入命令：vi /etc/sysconfig/network-scripts/ifcfg-ens33。把文件中的 ONBOOT 的值改成 yes，然后保....
大家好，我叫周涛，商丘职业技术学院的大数据专业，大一新生，很开心能在这里遇见优秀的你们，以后还要各位大佬带带我这个小....
注：一定要看好自己所在的位置，注意空格和大小写 一、切换到hadoop下面的etc（配置文件都在etc下面） 二、在hadoop中配置co....
文章目录 1. 并发冲突问题2. ES的乐观锁并发控制3. _version元数据4. Replica Shard 数据同步机制5. 基于internal_version进....
谷歌是世界上薪水最高的科技公司之一。外媒Business Insider所挖掘的最新数据显示，谷歌位于加州的硬件工程师的年薪最高可达....
使用dockerfile编写haproxy镜像 目录结构 [root@docker /]# tree /haproxy//haproxy/├── dockerfile├── entrypoint.sh....
Kettle是一款开源的ETL工具，纯java编写，可以在Window、Linux、Unix上运行，绿色无需安装，数据抽取高效稳定。 Kattle的工....
「有时，表达自己的意见，即使可能是错的，也比转述别人的真理要更有意义」 —— 陀思妥耶夫斯基 就在本月，大数据行业的一....
一、ZooKeeper安装 ①首先将ZooKeeper安装包上传到集群上，使用Xftp进行上传 ②解压到module中 tar -zxvf apache-zookeeper....
Kafka启动成功且运行程序无报错，外网无法连接Kafka的消费者或生产者 sparkStreaming消费kafka中的数据，得不到数据以及无....
名师互学网 版权所有 (c)2021-2022 ICP备案号：晋ICP备2021003244-6号
