大数据系统知识_大数据系统学习笔记

施工企业实现数字化转型的目标 1.信息化平台对企业的赋能 企业充分运用自身的信息化管理平台中汇聚的各类合同、成本、资金、....

首先我们知道在Kafka中 一台kafka服务器就是一个broker。一个broker可以容纳多个topic。一个topic可以分为多个partition。一....

消费者源码解析，基于0.10.0.1版本 初始化 consumer 对象 // 主要初始化的几个组件：new几个对象，NetworkClient、ConsumerC....

private int waitTime = 8; //等待几秒 todo// private String nacosMetaUrl = "http://10.18.225.....

自 2009 年比特币诞生以来，数字货币及相关产业已经历了约十年的蓬勃发展，数字货币投资者对专业化、规模化、规范化的资产管....

前言： 环境：java8，hadoop3.13，hive3.1.2，flink1.13.5-2.11，scala2.11，系统linux（Ubuntu），maven>=3.3.1(配置的镜像....

一、导入依赖 org.apache.hbase hbase-server 2.0.5 org.gl....

ZooKeeper-cli: the ZooKeeper command line interface Pre-requisites Enter into the ZooKeeper-cli # connect to the localho

一个简洁的博客网站：http://lss-coding.top，欢迎大家来访 学习娱乐导航页：http://miss123.top/ 1. 消息队列简介 1.1 什....

目录 技术组件 Flume Hive Hue Spark Yarn 其他 3台4核32G机器 技术组件 Flume 代理名称  agent1 配置文件 # 设置代理....

“藏金于民”是传统的黄金投资方式，随着投资市场的发展，黄金投资的方式更加便捷、新颖、多样，从传统模式到线上投资，见证....

数字孪生（Digital Twin）(又称数字双胞胎、数字化双胞胎等)是以数字化方式创建物理实体的虚拟模型，借助数据模拟物理实体在....

SQL注入攻击 就是利用Statement类不能对数据库的特殊符号做解释而被一些别有用心之人攻击。 SQL注入攻击会使得我们数据库的....

kibana简介 kibana 是一款开源的数据分析和可视化平台，它是 Elastic Stack 成员之一，设计用于和 Elasticsearch 协作。您可....

尚国栋是华北电力大学数理系大三的学生，LSGO软件技术团队（Dreamtech算法组）成员，参加了多期Datawhale的组队学习，荣获多....

简介 Vulmap 是一款 web 漏洞扫描和验证工具, 可对 webapps 进行漏洞扫描, 并且具备漏洞利用功能, 目前支持的 webapps 包括 ....

Recovery is suppressed by NoRestartBackoffTime Strategy 主键冲突 1、错误场景 首先我这个错误场景是使用flink连接mysql....

发现问题 跟着尚硅谷的教程搭建HDFS高可用集群，环境配置什么的都搞好了，但开始启动Hadoop102节点的namenode时出现了问题：....

文章目录 1、UDF1) 创建 DataFrame2) 注册 UDF3) 创建临时表4) 应用 UDF 2、UDAF1) 实现方式 - RDD2) 实现方式 - 累加器3) ....

对于不熟练的同学来说在构建Java代码查询之前一定要先将DSL查询语句，这样方便构造。 首先说一下bool查询的几种逻辑关系（子....