大数据系统知识_大数据系统学习笔记

大数据管理与应用专业： 数据科学教育特点：不仅依赖于传统的信息管理于信息系统专业，更依赖于计算机、数学、统计等学科。....

Hbase的学习笔记（2） ​ 在Hbase的学习笔记（1）中 主要是对Hbase相关的理论知识简单说了一点。在Hbase的学习笔记（2）中 ....

关注微信公共号：小程在线 关注CSDN博客：程志伟的博客 CDH存在很多的隐患  点击hive  在点击 log Dirctory Free Spac....

读书笔记的历史文章， 《关于数据治理的读书笔记 - 什么是数据战略？》 《关于数据治理的读书笔记 - 企业数据治理的“道、法....

概述：利用iptables搭建网关服务器，即通过SNAT功能，使内网服务器访问互联网 环境介绍： 主机A： ip1 10.24.12.254（可以访....

1. 查看rabbitMQ和erlang版本对应关系 https://www.rabbitmq.com/which-erlang.html 我选择的rabbitmq的版本是“rabbitmq-se....

在使用idea进行spark开发时遇到如下报错 Exception in thread "main" java.lang.NoClassDefFoundError: scala/Product$class....

定义:载一个RDD算子中,引用了外部的对象,则该对象会被序列化发送到各个Excutor上反序列化;反序列化出来的闭包对象,已经是完....

根据2021年艾媒咨询报告，中国轻医美行业环境分析数据显示，中国轻医美用户0.5--6个月内想再次体验的用户高达66.9%，同时根....

1、安装 EPEL repository 2、更新系统 sudo yum -y update 3、添加yum源 curl -s https://packagecloud.io/install/rep....

文章目录 1. 为什么要安装ElasticSearch集群？2. Docker下安装ElasticSearch集群的步骤2.1.关闭防火墙2.2.添加环境参数2.3.....

1) 闭包检查 从计算的角度, 算子以外的代码都是在Driver端执行, 算子里面的代码都是在Executor端执行。那么在scala的函数式....

▼ Mint     「铸造」的意思。艺术家或收藏家最初在区块链上发行艺术品的行为。 ▼ Liquidity     「流动性」的意思。....

1、下载elasticsearch wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-8.0.0-darwin-x86_64.t....

使用canal实时同步MySQL数据到es 软件版本信息安装 elasticsearch安装 kibana下载和安装canal1、下载canal2、配置MySQL3、配....

Spark Streaming + Kafka 实现实时数据传输 版本说明：Spark 3.0.0Kafka 2.12zookeeper 3.5.7 文章目录 Spark Streaming + ....

版本 Flume 1.90 使用 配置文件信息 文件名nc-flume-log.cof # 配置source sink 和channels 的命名 a1.sources = r1 a1.sink....

写入调优 1、写入前副本数设置为 0； 2、写入前关闭 refresh_interval 设置为-1，禁用刷新机制； 3、写入过程中：采取 bulk ....

CHD集群在服务器节点的IP改变之后需要修改一些配置，它本身不会如Apache原生软件那样完全依赖服务器的域名映射，我这边本地....

01 夜间数据备份异常，你发现了吗？        2月16日凌晨，MOC值守的合肥某三甲医院接到告警信息。        MOC专家....