大数据知识_大数据学习笔记

2021SC@SDUSC DataTree函数方法 cachedApproximateDataSize: //返回所有DataNode的路径和数据所占的空间大小 public ....

2021年马上就快结束了，最近内卷严重，各种跳槽裁员，相信很多小伙伴也在准备明年的金三银四的面试计划。 在此分享一套学习....

配置启动Hbase和zookeeper以后，进入hbase219:16010界面有报错： 1 region(s) in transition for more than 60000 milliseco....

一、Spring Data框架集成 1.1 Spring Data框架介绍 Spring Data是一个用于简化数据库、非关系型数据库、索引库访问，并支持....

一，Spark Thrift Sever是什么 Spark借助Hive的Metadata Service可以实现通过命令行客户端工具执行Sql语句，就像是Hive或者M....

文章目录 日志收集一、项目背景二、解决方案三、面临问题四、业界方案4.1 ELK4.2 存在问题： 五、架构设计5.1 组件介绍5.2 ....

相信关心Crypto的小伙伴们最近从各类渠道，或多或少都注意到了Messari的这篇加密货币年度报告。 首先简单介绍下Messari这家....

Hadoop之Yarn案例 目录 Hadoop之Yarn案例 一、Yarn生产环境核心参数配置案例 二、容量调度器多队列提交案例 向Hive队列提交....

1）大数据常见业务  2）业界常见解决方案  3）clickhouse简单。适合spark hive已经离线处理好了，离线批量导入。update....

12月23-24日，2021数据技术嘉年华（DTC）将通过墨天轮社区线上举办。围绕“智能·创新·新生态——数据智领未来 生态共创价....

第二部分阐述程序员所需要掌握的ZooKeeper库调用方法和编程技巧，虽然对系统运维人员来说也有一定价值，但也可以不选择阅读....

#!/usr/bin/env python# -*- coding: utf-8 -*-# @Author: 风过无言花易落# @Date : 2020/11/02 14:00# @Desc : kafka生产....

查看自己的版本信息 dd(php_info()); 1.php的版本是7.3 2.线程是非安全的 3.x64 下载ampq扩展 下载地址：http://pecl.php.n....

ELK:ElasticSearch+logstash+kibana Logstash(清洗，收集数据)——>ElasticSearch(搜索，存储数据)——>kibana(展示，分析数....

记flink sql cdc消费kafka数据，sink到pg表数据漏数排查[原因分析] flink sql insert into t3select cast(t1.a as varcha
....

大数据技术AI Flink/Spark/Hadoop/数仓，数据分析、面试，源码解读等干货学习资料 98篇原创内容 公众号 Linux sed 命令是利....

@Override public IPage healthManagerSearchByEs(PageParams healthManagerSearchVO) throws IOException { SearchRe

查看运行中的容器 # docker ps 进入容器 # docker exec -it /bin/bash 启用插件 输入以下命令查看所有插件： # sudo rabb....

消息中间件 它是一种接收数据，接收请求，发送数据，存储数据等功能的技术服务。 消息中间件利用可靠的消息传递机制进行系统....

javax.jdo.option.ConnectionDriverName com.mysql.cj.jdbc.Driver javax.jdo.option.ConnectionUserName root javax.jdo.opti