大数据系统知识_大数据系统学习笔记

本文基于《中国管理案例共享中心案例库》中”支付宝账单事件：如何保护消费者信息与隐私——《ISO26000》的指引“。（案例正....

编辑导语：如今有越来越多人正想着入职产品岗位，产品经理不论出生，人人都是产品经理，然而想做好产品经理也绝非易事。本文....

一、fastCall基本介绍 fastCall是一个基于Java语言的分布式RPC框架demo，供RPC初学者学习使用 fastCall框架目前基于netty+zo....

1.下载 下载地址：Download Elasticsearch | Elastic  wget https://artifacts.elastic.co/downloads/elasticsearch/elas....

代理键 1、业务主键重复怎么办？ 2、hive中怎么设计代理键？ 3、维度设计 4、事实表如何装载代理键？ 5、代理....

1、背景：kafka的基本知识和基于kafka2.0 + zk模式的部署参考： 【Kafka】kafka的基本架构和安装配置_yaotengjian的博客-CSD....

1.首先安装并启动zk,我们假设启动端口为2181 2.下载kafka版本：我们使用scala2.11的版本 3.修改server.properties把 log.d....

1.拷贝三份nacos 修改端口 server.port=8848 server.port=8849 server.port=8850 2.集群配置 /conf/cluster.conf.example....

舆情系统 中数据采集是一个关键部分，此部分核心技术虽然由爬虫技术框架构建，但抓取海量的互联网数据绝不是靠一两个爬虫程....

-- 数据库use rljl;-- yarn资源队列set spark.yarn.queue=fcqueue;set hive.cli.print.header=true;-- 动态分区set hive.exe....

软件版本采用的是：VMware Workstation12 + CentOS7 安装步骤如下： 1. 创建虚拟机 （1）安装VMware Workstation12（省略）....

推荐先安装jdk1.8，查看命令：java -version 使用brew安装flink，命令如下： brew install apache-flink 查看是否安装成功....

文章目录 一、Hive 中数据的导入1、本地文件系统 导入 Hive 表2、Hdfs 导入Hive3、查询结果 导入 Hive4、创建表时将查询结果....

多表查询 Person表： Address表： 内连接 查询两表交集部分数据。 #显式内连接SELECt p.PersonId, p.FirstName, p.Las....

背景 在之前的文章中Spark DPP(动态分区裁剪)导致的DataSourceScanExec NullPointerException问题分析以及解决,我们直接跳过....

文章已收录到我的Github精选，欢迎Star：https://github.com/yehongzhi/learningSummary 写在前面 上一篇文章通过写一个Wor....

求出ee 对应的数组的长度. -- 数据格式如下{ "aa": "2021-09-10-08-00-00", "bb": "格式参考如下"}{ "cc": "lpOkP.....

最近想学习如何使用hdfs来存储文件，在网上学习了一下，明确了HDFS（Hadoop Distribute File System 分布式存储）、mapReduc....

显示内置的函数 show functions; 创建自定义函数的步骤（这个属于临时函数） 第一步：写Java代码，在pom文件中引入Hadoop和h....

1、Hue创建Oozie工作流 （1）local 模式 登录Hue，创建Oozie工作流，点击【Workspace】按钮，新页面打开，上传jar包至lib目....