大数据知识_大数据学习笔记

经过互联网的迅速发展，改变着各行各业的管理模式，其中也改变着房产中介行业，让中介行业也通过互联网和新技术来经营和管理....

一、工作队列(work queues)模式 工作队列（又称任务队列）的主要思想是避免立即执行资源密集型任务，而不得不等待它完成。相....

基于Zookeeper的Hadoop HA集群的搭建 JunLeon——go big or go home  前言：         高可用（high availabilit....

运行flink程序时遇到异常：The types of the interface org.apache.flink.util.OutputTag could not be inferred. Support f....

一、Hadoop安装 上传文件到/export/server(tunabook102)(tunabook103)(tunabook104) 解压缩文件(tunabook102)(tunabook10....

目录 1、 窗口基本用法1.1 over 关键字1.2 partition by子句1.3 order by 子句 2、Window子句3、排名函数4、序列函数5、GRO....

RabbitMQ 同步和异步通讯同步通讯异步通讯 常见的MQ常见MQ对比 安装RabbitMQ下载镜像方式一：在线拉取方式二: 从本地加载....

连接不上数据库可能需要重启tomcat 。。。未完待续

文章目录 前言安装和下载开启虚拟化功能安装安装SSH利用FileZilla软件软件向Ubuntu传输文件 进入root权限传输文件解压改变....

1. 自定义 Agent 组件 1.1 自定义 Interceptor 1.1.1 需求 检测一个端口的数据，将数据包含codecat发送到一个channel，不....

2021SC@SDUSC 本次代码分析将从Hadoop中的Writable，Hadoop中的压缩读取数据（API)以及Hadoop中类Client的相关作用及代码进....

一、虚拟机的克隆 虚拟机右键>管理>克隆 下一步 选择克隆源 创建完整克隆 选择虚拟机位置 克隆完成 重复上述步骤创建tunaboo....

文章目录 资料收集基础入门Elasticsearch概念与MySQL对应 MySQL同步ES几种同步方案数据一致性问题主流解决方案 其他（TODO....

Spark的数据读取及数据保存可以从两个维度来作区分： 文件格式 文件格式分为：text文件、csv文件、sequence文件以及Object文....

文章目录 一、shell介绍shell是什么?shell脚本文件格式 二、脚本执行的常用方式1、==a.sh==：在当前目录查找（有条件）2、=....

昨天晚上, 试验一下Hadoop3.1.3版本, 结果namenode的50070总是访问不成功, 各种调试, 防火墙检查了无数遍, 还是不行, 最后发....

** 1.java类报错 ** 一般外部导进来的web项目的Java类报错是因为 JRE 或者 Tomcat服务器 版本对不上自己电脑的 JRE 或者 Tom....

文章目录 1. 概述 1. 概述 本地想大家一个hadoop，然后报错如下 Hadoop都启动不了。参考https://blog.csdn.net/kin....

批处理是把数据攒起来，一次性进行处理的方法。相对而言，流处理是不保存数据，按照到达处理服务器的顺序对数据依次进行处理....