
介绍 说起 Kafka 很多同学都知道,即使你没有用过也知道,它是消息队列中数一数二的运动健将,他可以承载每秒钟上百万此的数....
区块链为互联网带来一次技术革命,去中心化的网络开始向着传统中心化网络发起挑战。到目前,区块链已经在金融、农业、教育、....
One Day 1.数据库表详解2.项目环境准备 github地址:https://github.com/Zealon159/light-reading-cloud 项目服务端主要使....
第一关:sparkcontext初始化 import org.apache.spark.{SparkConf, SparkContext} object Test { def main(args: Array....
第 3 章 Hadoop 集群和 YARN,虽然 Hadoop 也可以在单机上运行,但是这个平台的典型运行场景无疑是在多机的集群(Cluster)上。....
1 介绍 Kafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调....
3台服务器部署es6.3.2,均启动成功,但是一直报not enough master nodes discovered during pinging错误,搜索参考了很多网....
1、创建用户组: groupadd 用户组名 创建admin用户组 [root@localhost ~]# groupadd admin 2、删除用户组: groupdel 用户组....
问题 在spark集群运行scala程序报错 Error:scalac: error while loading package, class file 'C:Program Files (x86)s....
pom.xml 配置 4.0.0com.rj.bdMybatis_Maven_Lx90.0.1-SNAPSHOTjarMybatis_Maven_Lx9http://maven.apache.orgUTF-8junitjunit....
环境: jdk1.8 centos7.6 elasticsearch7.8 config/elasticsearch.yml hadoop168: cluster.name: elasticsearch-clus....
编译了hadoop,可以方便的查看某个函数的实现,可以根据自己的需要改动hadoop的某些实现机制(hadoop开源的好处)。 环境要....
pip install pyspark==你的spark版本版本一定要相同 文章目录 Spark RDD 编程的程序入口对象是SparkContext对象(不论何种....
作者:奥创 建设真正可持续发展的人工智能,是跨多学科、综合性强和智力密集的复杂工作。本文将通过可用AI、可靠AI、可信....
文章目录 说明分享介绍枚举方法枚举判断 实例简单枚举复合枚举 总结 说明 本博客每周五更新一次。 枚举是日常java开发中....
问题 在本地运行scala程序报错 代码 import org.apache.spark.rdd.RDDimport org.apache.spark.{SparkConf, SparkContext}ob....
1.Transform 1.1.基本转换算子 map/flatMap/filter map 把数组流中的每一个值,使用所提供的函数执行一遍,一一对应。得....
sqoop的 迁移数据到hive的报错 常见原因: 原因1: 未将hive中的hive-common-*.jar , hive-exec-*.jar(*为你的hive下的文件....
RabbitMQ学习 第一章 基本介绍 1.1 什么是MQ? MQ是利用高效可靠的消息传递机制进程异步的数据传输,并基于数据通信进行分布....
一 具体:Spring Cloud Config配置全局刷新 1 业务、需求 业务:spring cloud netflix + spring cloud conf....