大数据系统知识_大数据系统学习笔记

计算整数的最大值最小值 Map类 package MaxMin_03;import org.apache.hadoop.io.LongWritable;import org.apache.hadoop.io.....

数据中台的建设第三年，我们开始推动数据中台的API开放，原因见《为什么是API而不是文件，对于数据中台的开放如此重要？by ....

这里用的分词器版本是elasticsearch-analysis-ik-7.16.1.zip，和elasticsearch是相同的版本，这样不容易出错。 每个节点的el....

近日，中国（南京）国际软件产品和信息服务交易博览会（简称“南京软博会”）正式拉开帷幕！根据最新疫情要求，展会将采取“....

1.HDFS基础知识 1.HDFS基础知识 2.HDFS操作 3.HDFS读写流程 1.1传统文件、存储 文件系统：存储数据和管理数据的一种方式传统....

1、ElasticSearch 概述 The Elastic Stack, 包括 Elasticsearch、Kibana、Beats 和 Logstash（也称为 ELK Stack）。能够安全....

目录 6.1 建立数据仓库示例模型 6.1.1 业务场景 1. 操作型数据源 2. 销售订单数据仓库模型设计 6.1.2 建立数据库表 1. 在MyS....

在绝大部分企业的数据中台建设中，数据流水线的建设都是核心工作之一。数据流水线系统承担着将数据从原始形态转换到用户与业....

2021SC@SDUSC 研究内容简略介绍 上周我们在学习了RecordReader的基础上分析了RecordWriter的源码，并对mapreduce中最关键的....

Spark分布式计算期末复习 1. Scala1.1 特点1.2 Scala源代码文件，编译后的文件1.3 变量和常量1.4 推断类型1.5 for循环1.6 数....

每年进入Q4季度，跨境电商企业便会主动出击，做旺季爆单和清库存的准备工作。刚刚落幕的黑五促销季，很多出海品牌运用跨境直....

近几年，随着共享经济的萌芽，共享行为变得无处不在，从最早期的共享单车到现在的共享充电宝，共享这个概念已经横跨了各行各....

面对疫情常态化、国际贸易摩擦，2022年企业数智服务将走向何方？ 12月21日，国内企业服务领域趋势洞察年度高端峰会——洞见2....

目录 一、连接步骤 1.DBeaver连接hive数据库时需要先在服务器启动hive的metastore服务和hiveserver2服务 2.启动之后通过jps....

这里写自定义目录标题 方法实现的步骤结果 方法 很多年前想弄明白分子的VDW，SAS，ES表面的生成方法，一直不得要领。查文献....

目录 前言 一、人工智能的引入 1、什么是智能？ 2、什么是人类智能？ 3、什么是人工智能？ 二、人工智能的特点及分....

2019年初，我通过一整天的笔试及面试加入一家（某一线城市国资委全资控股）某集团的研究机构（中央研究院），任职高级软件工....

GC 分代收集算法 VS 分区收集算法 GC 垃圾收集器 JAVA IO/NIO JVM 类加载机制 JVM 脑图 JVM 脑图对应详细文档解析 JVM....

在电子行业默默奉献的电子工程师： 您好。感谢您百忙之中阅读这份邀请信。对您来说，这并非普通的邀请信，而是见证电子行业....

HDFS写数据流程 写数据 HDFS的写数据流程涉及三个主体：客户端、NameNode、DataNodes。 在这里仅简单介绍流程，详细流程可以....