
1. 背景概述 为了保证消息从队列可靠地达到消费者, RabbitMQ 提供了消息确认机制( message acknowledgement), 消费者在订阅....
今天值班由于hdfs的日志满了导致磁盘爆了100%,zk和journal都挂了删日志文件的时候,不知道删错哪个地方了。该目录下一直报....
HADOOP 命令sbin/start-dfs.sh 启动 报错 Error: Cannot find configuration directory: /etc/hadoop JAVA_HME is not s....
pom.xml 4.0.0 org.example RabbitMQ 1.0-SNAPSHOT 8 8 com.rabbit
目录 一、概念 二、主要解决 三、特征(4V) 四、应用场景 五、技术体系 1.数据采集 Sqoop Flume Kafka 2.数据存储 Hdfs HBase....
ElasticSearch入门 1.ElasticSearch简介 1.1 什么是ElasticSearch? 基于Apache Lucene构建的开源搜索引擎;采用Java编写,....
一、方案背景 从我国解放初到20世纪出我们几乎还都保持以人力加机械的农田种植模式。从事农业种植的人口比价充裕。但是随着....
如果想考一个含金量比较高的证书的话可去考个PMP®试试,他的含金量很高,是项目管理领域含金量最高的证书。 给你说说什么是....
一、Linux安装Rocketmq 1、linux安装jdk 由于Rocketmq使用java写的,所以运行环境需要jdk 第一步:将文件jdk-8u212-linux-x6....
说明:平常一般以master、node1、node2三个节点,这里以hadoop100、hadoop101、hadoop102为相对应节点为例。(名字不一样的注....
打开终端: 1、 输入命令: cd /etc/sysconfig/network-scripts/ 2、 输入 命令:vim ifcfg-ens*(注:这里是以 ifcfg-ens....
问1:如何提高数据同步效率? 答:1.配置Datax任务时为其配置切分键,推荐使用主键,并且在管道控制里提高任务并发数。 2.在....
Producer发送模式 同步发送 异步发送 异步回调发送 Producer发送原理解析 直接发送 KafkaProducer直接把消息发送到....
kinit -kt /var/lib/hue/hue.keytab hue sqoop import -D mapred.job.queue.name=root.etl.ld -D org.apache.sqoop.splitter.a
一、分析问题 如果当前问题经过分析是需要解决的,才会接着从人货场角度分析问题所在并寻求解决措施。 1、判断数据源质量 确....
一、Load功能简述 load 命令将底层文件系统(Under File System)中的数据载入到Alluxio中。如果运行该命令的机器上正在运行....
在前面已经完成数据库MariaDB的安装应安装 yum install -y epel-release Redis 和Robbit MQ 依赖于ERlang(erlang),relang又....
去Oracle官网下载所需JDK版本: JDK 上传至所在服务器,进行解压后: tar zxvf jdk-8u212-linux-x64.tar.gz 设置环境变量 ....
生产者消费者 生产者消费者问题概述 生产者/消费者问题,也被称作有限缓冲问题。可以描述为:两个或者更多的线程共享同一个....
java.lang.Exception: java.lang.NumberFormatException: empty String at org.apache.hadoop.mapred.LocalJobRunner....