大数据知识_大数据学习笔记

海量日志收集实战 话不多说，看架构图： 最左侧，是Beats，它主要是用于收集日志的，比如这个Filebeat它的底层是用erlang语....

读写分离监控 Mycat节点安装zookeeper tar -zxvf zookeeper-3.4.14.tar.gz -C /opt/mv zoo_sample.cfg zoo.cfg (在/opt/zook....

streamlit以后可以完全替代flask，现在国内几乎找不到相关的学习资料。 今天周六看了一个上午，跟着官方的dome运行，也没学....

需求: 接收第三方回调消息, 两个独立的服务上分别消费这条消息 yml配置: rabbitmq: fanout: exchangeName: test # 解....

互联网时代，万元即可开启创业，以小博大，轻资产运作才是我们普通人创业首选。 这个时代人人都可以通过互联网赚钱，要转型....

一.大数据 广义大数据：以hadoop软件为主的生态圈(Sqoop、Flume、Spark、Flink、Hbase、Kafka和cdh环境) 狭义大数据：hadoop....

目录 一. 什么是Spark 二. Hadoop与Spark历史 三. Hadoop与Spark框架对比 四. Spark内置模块 五. Spark特点 六. Spark运....

1、Zookeeper及其他大数据组件简介 HDFS：是解决存的问题 HBase：解决大表的问题，是一个高可靠性、高性能、面向列、可伸缩....

需求： 1.将添加的数据缓存到redis 中，用定时任务删除年龄大于30岁的信息。 2.将修改之前的数据缓存到redis中，用定时任务....

安装Erlong RabbitMQ是一个开源的遵循 AMQP协议实现的基于 Erlang语言编写，即需要先安装部署Erlang环境再安装RabbitMQ环境....

mqtt 有许多实现的产品，这里使用国内使用比较多的emqx，可以参考 emqx安装 来安装环境 emqx 官方有提供java示例来连接mqtt....

实验七 MapReduce编程进阶 答案在链接里 https://blog.csdn.net/weixin_45818379/article/details/117790528

作者 | 贾凯强 出品 | AI科技大本营（ID:rgznai100） 一撇一捺，一勾一抹，笔走龙蛇，可见真意。 笔者小时候字迹潦草，便总....

1. 静态IP设置(Ubuntu18往上)：https://blog.csdn.net/D___H/article/details/121103655 2. 免密登录配置：https://blog.csd....

一、背景 在 Tableau 退出中国市场 的背景下，我们需要开启寻求替代方案的痛苦过程。 但在寻求的过程中，我们必须先理清楚，....

参考文章：Elasticsearch 字段为空(null)记录查询 - illusioned - 博客园 public void searchNullField() {NativeSearchQuer....

互联网低成本有前途的创业项目推荐，做互联网创业，如何开始？对于新手来说，可能会太追求各类技巧。其实，往往最重要的在于....

SpringBoot整合ES高级查询 springboot版本：2.0.5.RELEASE elasticsearch版本：7.9.1 1、配置 引入依赖： org.elasticse....

感谢大家的支持 来到这篇文章的同学，现在应该已经有了高可用模式的hadoop集群了，如果没有请参考我的另外一篇文章 (1条消息....

package com.educoder.bigData.sharedbicycle;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import