大数据知识_大数据学习笔记

Elasticsearch 概述 The Elastic Stack，包括Elasticsearch、Kibana、Beats和Logstash(也称为ELK Stack)。能够安全可靠地获....

最近项目需要使用elastic-job-lite来完成定时任务功能 引入对应的jar包后，包括guava 20.0版本。每次项目启动后报错： com.....

每天都在和你在一起         Spark Group By函数将相同的数据收集到DataFrame/DataSet上的组，并对分组后的数据执....

1.KDC节点 KDC节点上需要安装krb5-server、krb5-libs、krb5-auth-dialog、krb5-workstation服务，Client单独部署在其他节点 ....

初级的消息中心准备提供一个统一的消息中心接口，用户通过消息中心可以将消息发送到kafka集群 ，然后通过消费去推送企业微信....

参考资料： Hive SQL 参数与性能调优 小文件优化 小文件过多的影响： （1）小文件过多会导致namenode元数据特别大，占用过多....

@22上岸经济统计学博士有尝辅导做能力范围内的实证、大数据等！小挣一点零花钱 儿！！ 业务介绍 研究生期间学习了一些实证模....

参考文章： Hive SQL 参数与性能调优 数据倾斜的原理都知道，就是某一个或几个key占据了整个数据的90%，这样整个任务的效率....

Dubbo dubbo简介 Dubbo是一个分布式服务框架，致力于提供高性能和透明化的远程服务调用方案，这容易和负载均衡弄混，负载均....

原因是没有导入maven-site-plugin:3.3 在配置文件中手动导入： org.apache.maven.plugins maven-sit....

kerberos管理节点 nyyjh1 Kafka节点 nyyjh2 nyyjh3 nyyjh4 Zookeeper节点 nyyjh1 nyyjh2 nyyjh3 1.在kerberos管理节点....

2022年2月28日至3月4日共收录全球网络安全热点8项，涉及丰田、英伟达、思科等。 01 GPU巨头英伟达遭受网络攻击，1TB数据被窃....

查找网上许多方法都没用，最后自己从包处解决 import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.....

1、 –dws层经过处理后的数据 select table1.user_id as user_id , table1.read_book_id as arrays --arrays字段在dws_q....

苏州龙石信息科技有限公司（以下简称 “龙石数据” ）经过审核成功入选TGO鲲鹏会企业图谱（第一版）。 TGO鲲鹏会作为汇聚....

前言 问题描述 是这样的，项目需要重构，所以原来的参数名称都变了，原来返回前端的名称是body； private Object body;明显....

大数据部署的前置准备 服务器规划配置服务器修改服务器名（所有节点）重启服务器 修改映射 hosts （所有节点）关闭防火墙....

package com.topnet.utils;import javax.crypto.Cipher;import javax.crypto.SecretKey;import javax.crypto.spec.SecretKeySpec

前言 好久没有更新 “好” 文章了，内心很过意不去，怎么变的这么懒了，哈哈哈哈哈 正好，最近数据湖的概念火的一塌糊涂，特....

文|螳螂观察 作者| 易不二 “长得好看能当饭吃吗？” 在当下社会，不仅人长得好看能当饭吃，商品长得好看也能当饭吃。 CBNDa....