大数据系统知识_大数据系统学习笔记

原文： https://juejin.cn/post/7008456373931343908 面试中MQ是常问的，我认为这并不属于八股文，而是对复杂业务场景下的总....

springboot整合rabbitmq 一、案例结构二、集成流程1.1、依赖1.2、配置文件1.3、配置类-序列化机制和定制RabbitTemplate 三....

hadoop集群：HDFS读写流程图与HDFS元数据管理机制 1，HDFS读流程 客户端通过Distributed FileSystem向NameNode请求下载文件....

hadoop hdfs的shell命令与java 常用api的操作与思想保持一致，故对比，易于理解与记忆 主要区别点： shell命令行，一般在虚....

一、前言         大数据就是主要解决海量数据的存储和海量数据的分析计算问题的一个领域。 二、大数据特点（4V）....

李婧婧   安科瑞电气股份有限公司  上海嘉定  201801 摘要: 通过对大型化工企业能耗情况和现有能源管理模式的分析，系....

准备工作 3台虚拟机，操作系统为CentOS8，分别作为控制节点，计算节点，存储节点。 一 控制节点 1.配置网卡/IP 修改网卡配置....

目录 前言 1．1 大数据概念及价值 1.1.1大数据的特征（特点） （1）规模性（Volume） （2）多样性（Variety） （3）高速性（....

1. 在经历了20多年信息化建设进程之后，如今的中国企业正在数字化和数智化升级的产业浪潮中踏浪前行。随之而来的，在对内、....

hive写mysql时spark.sql(sql) .coalesce(2) .write .option("truncate", "true")//先删 .mode("overwrite") .format("p....

目录 2．1 Hadoop简介 2．1．1 Hadoop由来 2．1．2 Hadoop发展历程  2．1．3 Hadoop生态系统  2．2 Hadoop的体系架构  2....

目录 获取当前日期：current_date()获取当前时间：current_time()获取当前日期和时间：current_timestamp()获取当前日期和时....

首先列出mq产品各方面对比如下： 选择rocketmq的原因： 性能是首要考虑的要素。开发语言是java，主要是为了方便二次开发。对....

文章目录 杂七杂八分布式系统的难点/各方面tradeoff强一致性、弱一致性、最终一致性 杂七杂八 分布式系统的难点/各方面trad....

随着社会经济水平的提高，智慧城市规模不断扩大，数字孪生可视化平台基建设施愈发完备。在向小康社会前进的路上，人们对幸福....

智慧矿山数字化案例，数字孪生智慧矿山及煤山软件企业，数字孪生智慧矿山及煤山解决方案可视化技术系统的建设。 矿山三维数....

前言 现在用dubbo的太多了，我到现在还不熟悉，这太不应该了，这次好好看了一下dubbo,终于把基本的启动框架搭好了。dubbo的....

上一篇：Hive源码系列二分析 Hive 如何将一个 SQL 转换成 AST；本节将基于上节的 AST 做进一步操作直到提交任务为止 本节从 ....

安装openjdk-8-jdk sudo apt-get install openjdk-8-jdk 查看java版本，看看是否安装成功 wzj@wzj-ThinkPad-T61:~$ java -ve....

参考链接: B站视频 什么是一致性 CAP理论： 对于一个分布式系统，不能同时满足以下三点： 一致性（Consistency） 可用性（Av....