大数据知识_大数据学习笔记

1.修改mysql配置文件 window下的my.ini # 验证flink cdc 可以自定义，但必须唯一server-id = 1# 可以自定义，binlog文件的前....

安装包如下 链接：https://pan.baidu.com/s/1JR0Xy2zO_vTsvTHt3Osn3A 提取码：gzzx 将安装包放置Linux系统下某个目录 以下以....

为什么不用python？ 总体上来说，PySpark是借助Py4j实现Python调用Java，来驱动Spark应用程序，本质上主要还是JVM runtime，....

Hadoop作为分布式存储系统，各个节点之间的通信和交互必不可少，所以需要实现一套节点间的通信交互机制。RPC(Remote Procedu....

在很早之前，我曾经写过两篇关于Hbase的文章： 《Hbase性能优化百科全书》 《Hbase FAQ热门问答小集合》 如果你没有看过....

1、配置主机的IP地址（修改的文件是：/etc/sysconfig/network-scripts/ifcfg-eno16777736） #在末尾加上IPADDR=192.168.20.2....

将工业物联网想象成公司的神经系统：它是一个传感器网络，从生产工厂的各个角落收集有价值的信息，并将其存储在一个数据库中....

使用rabbitmq模拟下单后，30分钟未支付，取消订单，回滚库存。 这是使用rabbitmq的延迟队列来实现。不过rabbitmq并没有延迟....

简介 Sqoop 是一个常用的数据迁移工具，主要用于在不同存储系统之间实现数据的导入与导出： 导入数据：从 MySQL，Oracle 等....

文章目录 1 预先说明1.1 软件版本说明1.2 集群配置说明 2 集群规划3 搭建环境3.1 修改配置文件3.2 zookeeper 的安装与配置....

2021SC@SDUSC IWatchManager zookeeper的watch管理器接口 //将watcher加入指定路径,返回布尔值，若为真，则说明原本对应....

删除表时数据会被删除； 以下命令创建的就是内部表，可见前面两篇文章中创建的表都是内部表： create table t6(id int, na....

ElasticSearch 倒排索引 正序索引 倒排索引 使用倒排索引可能导致索引量爆炸 只索引到诗名且建立索引矩阵 搜索引擎三大....

介绍 snappy是谷歌开源的用于数据快速压缩和解压的程序库，它的目标并非实现最大压缩率，而是同时实现非常高的压缩速度和合....

package com.corecmd.webapp.tiansjportal;import com.alibaba.fastjson.JSON;import com.corecmd.webapp.tiansjportal.common.e

个人笔记 先到 librabbitmq package : Ubuntu 拷贝下载地址 然后 wget  你拷贝的值 在解压出来 tar -zxvf 压缩包文件名称 ....

问题：没有在防火墙中开放5672以及15672两个端口号 解决办法：在开启防火墙状态下添加这两个端口号 sudo firewall-cmd --add....

1.2 可重入锁 ReentrantLock 及其他显式锁相关问题（八问） ===================================== 问题一： 跟 Synchroni....

2021SC@SDUSC 研究内容简略介绍 上周我们分析了org.apache.hadoop.mapreduce.Counters中的的核心代码，本周将继续对Counters....

Ubuntu卸载和重装elasticsearch 1.删除先前版本的elasticsearch2.删除elasticsearch目录3.安装elasticsearch 1.64.启动服务5....