大数据知识_大数据学习笔记

一、hdfs调优： 在hdfs-site.xml文件中修改配置文件: 1.dfs.namenode.handler.count：调整namenode处理客户端的线程数 value....

Kylin：是一个开源的、分布式的分析型数据仓库系统，提供 Hadoop/Spark 之上的 SQL 查询接口及多维分析（OLAP）能力以支持超....

Sqoop安装及案例导入导出数据（基于Hadoop环境） Sqoop主要用于在Hadoop(Hive)与传统的数据库MySQL间进行数据的传递可以将一....

一、算法原理     实用拜占庭容错算法 (Practical Byzantine fault tolerance, PBFT)是一种状态机副本复制算法, 每个状态....

1.生产者消费者模型 技术点：         多线程模型，安全锁机制，等待与唤醒  /** 多线程 生产与消费模型： 分....

文章目录 下载 Hbase安装 Hbase启动 HbaseJava API 连接 下载 Hbase http://apache.mirror.cdnetworks.com/hbase/ cd ~/sof....

1、起源：囫囵吞枣的啃食一番源码之后，再加上笔者分布式经验，突然间产生一个具备复用场景下的一个分布式出入库设计。   ....

文章目录 前言原因分析解决方法（二选一）1、指定具体索引名2、继续使用别名 转载请标明出处： https://bigmaning.blog....

在用sql loader做csv文件导入mysql时，偶然发现日志报了Row xxx doesn't contain data for all columns。mybatis xml s....

dubbo admin 弹出close 问题解决 dubbo admin 弹出close解决方法 dubbo admin 弹出close 出现这种情况的原因是由于:后端未....

1、下载待安装的文件 在安装 RabbitMQ 之前，需要先下载好所对应的版本其他依赖包，对应RabbitMq的安装依赖如下图： 您必须....

详细介绍了RocketMQ的消息刷盘策略，以及RocketMQ的消息双写机制。 文章目录 1 RocketMQ的消息刷盘2 RocketMQ的消息双写 1....

小团队也能做的互联网创业风口项目推荐  怎么轻资产创业，创业项目如何选择？提起互联网创业，小伙伴们第一个问题肯定是考....

案例 每秒种输出10个传感器上面的温度值。 代码 import com.zjc4j.bean.SensorReading;import org.apache.flink.streaming.a....

前言 本篇文章会通过在MongoDB中的主从集群，以及集群之间同步机制和选举，以及如何达到读写分离、CAP分布式理论在mongodb中....

前言 数据湖一词进入我的视野是两年前，我记得当时是我们老板给做了DataBricks的技术分享报告，那个时候其实是介绍Spark的一....

摘要：政务区块链平台是行业区块链平台的初步实践，未来在区块链技术的发展下，还会打造面向其他领域的链管平台，构建多方协....

目前也并不是所有银行都是用大型机。四大行加招商核心系统应该用的是大型机，他们想去去不掉尽量去慢慢去。中小型银行和一众....

首先需要先了解一下docker 和基础命名，要不然在看我的代码的时候会有很多疑问 步骤1：拉取ElasticSearch7.6.1版本 docker....

1、调整/usr/local/nginx/conf下的nginx.conf 1.1、调整端口：80->8099 1.2、在location加上flink的访问地址  proxy_pass h....