大数据系统知识_大数据系统学习笔记

《后疫情时代：大重构》 克劳斯·施瓦布 蒂埃里·马勒雷 文章目录 《后疫情时代：大重构》一句话概括章节观点当今世界的三....

CodeWisdom 智能化软件开发沙龙是复旦大学CodeWisdom团队参与组织的专注于代码大数据与智能化软件开发的学术和技术沙龙，面....

环境 Db2 $ db2levelDB21085I This instance or install (instance name, where applicable:"db2inst1") uses "64" bi....

0. 论文链接：raft 1. 三个角色：Follower、Candidate、Leader 2. 在等待投票（选举）阶段，此时角色为Candidate，如果有一....

企业安全性和合规性上的薄弱环节 企业每天在防火墙内外的员工、系统、客户、供应商和合作伙伴之间传输数以千计的文件。我们....

1、Apache pulsar安装部署 1.1、前期准备 zookeeper 3.4.5pulsar安装包 2.8.1集群免密环境 1.2、部署步骤 1.2.1、上传安装包....

Sqoop导入hive中null字符串处理为NULL 其中注意 这个是转为空字符串而不是’null’这种。 可以用ifnull转化的 这种就是’n....

Springboot运行问题 Rocketmq相关rocketmq启动报fastjson version too low错误 Rocketmq相关 rocketmq启动报fastjson versi....

去年年底，重庆市住房和城乡建设委员会关于印发《重庆市绿色建筑“十四五”规划（2021—2025年）》的通知。明确了十四五期间....

安装nacos1.拉取镜像docker pull nacos/nacos-server2.启动镜像docker run --env MODE=standalone --name nacos -d -p 8848:....

 哈喽！大家好，我是【IT邦德】，江湖人称jeames007，10年DBA工作经验 一位上进心十足的【大数据领域博主】！....

hudi 0.9.0 spark 3.0.2 不知道为什么hudi不能被识别，只有填org.apache.hudi可以 result.write.format(“hudi”) 改成 re....

去年冬天受奥密克戎等疫情影响，纺织业国内市场的经济情况不容乐观，据国家统计局数据，2021年12月，国内限额以上服装鞋帽针....

问题： 在代码中测试SparkStreaming与Kafka整合的过程，需要在kafka中提前创建两个topic，但是在执行创建脚本的过程中报错如....

系列文章目录 文章目录 系列文章目录前言一、JVM内存管理在大数据场景下的问题1.有效数据密度低2.垃圾回收1.OOM问题影响稳....

1 大数据概述 1.1 大数据时代到来的背景 时代背景： ①云计算、大数据、物联网三者一起促成三次信息浪潮； 注: ....

问题描述： hive 查询hudi 报错， 已将hudi 对应包hudi-hadoop-mr-bundle-0.9.0.jar放入lib目录下并重启hive select ....

`import org.apache.flink.api.java.operators.DataSource; import org.apache.flink.api.java.utils.ParameterTool; import org

SparkStreaming 对接kafka数据源 使用SparkStreaming消费kafka中的实时数据，是流式数据处理的常用场景。 下面利用对接ka....

ML：MLOps系列讲解之《MLOps的State(工具和框架)》解读 目录 MLOps系列讲解之《MLOps的State(工具和框架)》解读 9、MLOps....