大数据知识_大数据学习笔记

1、列不可再分； 2、每一行数据只做一件事，只与一列相关，主键； 3、每个属性都与主键有直接关系，而不是间接关系； 三大范....

cat >/etc/logstash/config/redis.conf "localhost" port => "6379" db => "0" key => "ng_access" data_type ....

在定义数据时，默认值和不传值是两种判断方法： （1） 默认值的话 需要判断两次，不为空，不是空字符串； （2） 不传值的话 ....

一、 ElasticSearch在window环境下的安装 访问ElasticSearch的官方地址（https://www.elastic.co/cn/）下载ElasticSearch的w....

简介 索引是分片的逻辑分组，每一个分片都具有独立的索引功能。一个索引可以被划分为多个分片，这些分片是主分片，主分片可....

select regexp_replace(reflect("java.util.UUID", "randomUUID"), "-", "") uuid

文章目录 算子分类RDD依赖关系 Spark快速入门 算子分类 在spark中，将RDD的成员函数翻为算子(operator),我觉得叫操作也可....

es版本 7.14.1 查询索引的字段 get event_news/_mapping 模糊查询1 wildcard： （好用） get event_news/_search {“from”:....

数据是人工智能的基石。如果能在更短时间内将数据变为洞察，对于人工智能的开发而言无疑事半功倍。 　　在数据基础设施建设....

1.po开发 在项目目录“/src/main/java/com/example/es”下新建po目录，并在po目录下新建Employee实体类，具体代码如下。 @Da....

1、file--new project 进入如下页面 点击next， 2、进入如下页面 Name：填入项目名称 Location：对应项目文件地址 GroupId....

一、环境准备 1、首先给linux系统配置jdk环境变量。 2、进入zookeeper官网下载安装包，并将安装包上传到linux中。 3、进入k....

搭建第一个节点： docker run -d --hostname rabbit_host1 --name rabbitmq1 -p 15672:15672 -p 5672:5672 -e RABBITMQ_NODE....

目录 1- Spark 的运行流程？2- Spark 有哪些组件？3- Spark 中的 RDD 机制理解吗？4- RDD 中 reduceBykey 与 groupByKey 哪....

有一篇不错的博客 Ubuntu16.04下Hadoop的本地安装与配置

RabbitMQ 文章目录 RabbitMQ前言一、RabbitMQ是什么？二、应用场景1. 异步处理2. 应用解耦3. 削峰填谷 三、基础概念1. 组....

遇到的问题 kafka使用kerberos安全认证后，我这边的消费程序需要修改。原本如果是普通的消费程序，加两行代码就行了： Syst....

一、系统学习Java 1. 目标为系统掌握：网络请求、集合、多线程、高并发、JVM、缓存、数据库、Springboot框架，以及高性能IO(....

项目背景 今天突然接到一个需求-现有AB两套完全隔离的系统，分别对应不同的两套kafka集群cluster1和cluster2。需要实现用一....

流量是一切生意的本质.无论你的企业是卖产品还是服务,拥有用户流量是关键.但对一般的企业说,既无大量广告费去"砸"流量,也无....