大数据系统知识_大数据系统学习笔记

zookeeper的leader选举只有两种情况才会发起 1.zookeeper集群初始化 2.leader机器崩溃 首先就是集群初始化时候的选举，从zk....

sql优化以及shell脚本相关知识点汇总 实时更新！ 常用sql函数： decode（）(条件,值1,返回值1,值2,返回值2,…值n,返回值n,缺....

商业智能这一概念，自1996年提出至今，已经过了26年。市场对BI的态度，从好奇、探索直到习以为常，80-90年代的IT人还记忆犹....

大家好，我是小五類 如果你是一位数据分析师，必须学习并掌握结构化查询语言——SQL。但它主要用于查询检索数据，所以往往还....

学习大数据的第31天——shell数组、算数运算符、条件判断语句的注意事项、以及UDP(回顾java的网络编程) shell数组 数组中可....

记录问题的解决过程。解决的结果代码在最后的总结部分，拉到底就完事。 问题: RabbitMQ发送消息时，会不断创建新的信道(Cha....

1.1 定义 HBase是一种分布式、可扩展、支持海量数据存储的NoSQL数据库。 分布式体现：底层存储在HDFS；集群中的Regionserver....

安装Elasticsearch-php https://github.com/elastic/elasticsearch-php 使用composer安装： 在项目目录下，执行以下命令 com....

2月23日，在中国光伏行业协会主办的“光伏行业2021年发展回顾与2022年形式展望线上研讨会”上，国家能源局新能源与可再生能....

HDFS常用命令 查看文件夹下文件大小查看文件夹下的文件列表 查看文件夹下文件大小 hadoop fs -du -h / 查看文件夹下的文件....

文章目录 一、核心概念二、环境依赖三、索引管理1.创建索引和分片副本数目2.集群管理工具2.1 chrome插件 elasticsearch-head....

RocketMQ单机、集群及管理台搭建 一、RocketMQ单机1.1 环境准备1.2 单机服务安装1.3 单机服务启动1.4 快速验证发送接收消息1....

目录 前提要素官网地址Kylin安装Hadoop客户端节点环境配置准备工作敲命令下载CDH配置配置cdh客户端配置环境变量profile文件....

Spark参数优化 spark conf 中加入一些参数，会加速shuffle过程，这里根据数据量实际大小可以调节下面一些参数，实践中会对于....

基于Python爬虫和flask框架的天气监测可视化系统的设计与实现开发版本 项目获取项目简介项目技术项目功能项目说明 项目获....

文章目录 问题点:优化点:参考: 环境 spark2.4.8 on yarn(hadoop2.4.5) 优化后 package com.bl.bigdata.cdp.execservice.s....

一, MySQl 8.0 窗口函数 窗口函数适用场景: 对分组统计结果中的每一条记录进行计算的场景下, 使用窗口函数更好, 注意, 是....

今天下午面试两家，字节跳动数据研发一面和百度三面，百度那边突然不面了，hr说下个星期再看看，是直接过了还是再来一面，....

Elasticsearch 1. 了解搜索技术1.1. 什么是搜索1.2. 新业务需求1.3. 搜索引擎1.4. 倒排索引1.5. 认识lucene1.6. 什么是全文....

机器三台： node1 192.168.199.201node2 192.168.199.202node3 192.168.199.203PS:上面的机器名和后边要配置的集群....