大数据知识_大数据学习笔记

2021SC@SDUSC 研究内容简略介绍 上周我们将对InputFormat的几个重要子类，如FileInputFormat等展开了详细的分析，在了解了In....

将tar包上传到/usr/local下解压[root@moyue01 soft]# tar -zxvf zookeeper-3.4.10.tar.gz -C /usr/local/更名[root@moyue01 ....

`简介`Kafka是由Apache软件基金会开发的一个开源流处理平台，由Scala和Java编写。Kafka是一种高吞吐量的分布式发布订阅消息....

鲜花垂直电商花点时间的“线上卖花”生意，在一度陷入低谷之后，如今似乎迎来了第二春。 据金融界报道，在刚刚过去的双11中....

一.背景 今天收到告警短信发现某个业务系统几台服务器的日志收集服务filebeat均已下线，把Filebeat都重启之后，准备到Kibana....

1 数据分组       从上一章知道，SQL聚集函数可用来汇总数据。这使我们能够对行进 行计数，计算和与平均数，获得最大和最....

package TESTimport java.sql.{Connection, DriverManager, PreparedStatement}import java.utilimport java.util.Propertiesimp

Sqoop安装配置 1.1 启动ZK集群及Hadoop集群1.2安装sqoop1.3重命名sqoop1.4配置sqoop环境变量1.5复制mysql的驱动文件1.5.1进....

R语言构建xgboost模型：xgb.cv函数交叉验证确定模型的最优子树个数（可视化交叉验证对数损失函数与xgboost模型子树个数的关....

1.安装服务 [root@op_29e7cc73 ~]# yum -y install bind[root@op_29e7cc73 ~]# yum install bind-utils –y[root@op_29e7cc7....

标题：VALSE-特邀报告【人工智能在赋能设备、赋能临床、赋能科研中的应用实例】 主讲人：沈定刚 (上海科技大学、上海联影智....

拉链表是针对hive中数据仓库设计中为表存储数据的方式而设计的，所谓拉链表。就是记录一个事物从开始，一直到当前状态的所有....

2021SC@SDUSC 目录 compact源码分析 2021SC@SDUSC  接上一篇继续分析 compact源码分析 查看HRegion.compact()方法中调用的H....

一、系统建设背景 在2010年以前，国内各大石油公司的井下作业信息管理工作都还是比较滞后的，井下作业数据的管理依然停留在....

Linux-安装配置docker常用容器 常用docker操作命令 #重新加载配置文件systemctl daemon-reload#重启docker服务service docke....

前言 主要是我想记录下properties的相关配置，如果以后依赖使用的时候需要好找一些！最近想要重构所以进行项目的一些基础性....

HBase的集群能正常工作的前提条件是：安装并启动了 hadoop 和 zookeeper。 hadoop提供HDFS 给 HBase存储。 安装文档参考: H....

实际分析场景中，数据粉对美总是很执着，如何让分析占比的环形图，看着更漂亮点？比如给环形图增加刻度。 虽然数据分析还是....

▐ 分析背景 大部分品牌或商家寻求通过海量数据来更好地了解消费者，以便打造出色的商品和体验，这个过程中会面临数据整合E....

任何交投兴旺的市场都存在两种交易者——做市商和市场接受者。做市商一般尝试以当前最佳价格买入或卖出合约,在当前的最后交....