云平台知识_云平台学习笔记

springboot整合rabbitmq 添加依赖 org.springframework.boot spring-boot-starter-amqp con....

随着工业互联网产业的发展，边缘智能与实际应用深度融合。工业互联网的功能已经从统一的数据访问管理发展到工业机制、组件、....

ES 安装完，es-head 安装完，还差个可视化的 kibana Download Kibana Free | Get Started Now | Elastic 解压，目录移动到和....

php操作ElasticSearch es-php客户端安装 php环境版本要求： PHP >=7.1.0 ext-curl ext-json es-php扩展下载地址： https://w....

目录 Hadoop RPC框架原理 RPC类（org.apache.hadoop.ipc.RPC）分析 ProtobufRpcEngine类分析 应用层分析 Hdfs getBlockLocat....

前言 本文总结如何只用SQL迁移关系型数据库中的表转化为Hudi表，这样的意义在于方便项目上对Spark、Hudi等不熟悉的人员运维....

以下文档点击即可进入 Spark 3.2.1 官方文档 Spark 3.2.0 官方文档 Spark 3.1.3 官方文档 Spark 3.1.2 官方文档 Spark 3.1.1....

@ConfigurationProperties默认读取的是全局配置文件（工程创建成功后自带application.properties文件），所以如果我们需要导....

目录  同步调用： 异步调用  初识MQ      同步调用： 比如这里的支付服务，需要等待订单服务、短信服务...执行完....

建设内容 1、全域搜索：通过搜索框，可实现平台已采集并标准化的基础和业务数据的全量快速检索，确保纪检监察人员不遗漏任何....

centos7虚拟机安装 文章目录 centos7虚拟机安装先放上centos7镜像下载地址一、新建虚拟机二、虚拟机设置1.开启虚拟机2.登录....

这里的描述来自官方： 死信交换 来自队列的消息可以是“死信”；也就是说，当发生以下任何事件时，重新发布到交易所： 消费....

将交通大数据+AI能力应用于“情、指、勤、督”一体化建设 行业痛点 人手短缺问题 我国警民比例低，交管业务量巨大，长期存在....

1. 少用count(distinct ) 建议用group by 代替 distinct 。 原因为count(distinct)逻辑只会有一个reducer来处理,即使设定....

环境信息 ubuntu hadoop 3.3.1spark 3.2.1jdk 1.8.231scala 2.12.15 问题描述 已经安装好单节点hadoop，并验证成功，可以访....

headoop运行环境的搭建 先创建一个模板机hadoop100 0）安装模板虚拟机，IP地址192.168.10.100、主机名称hadoop100、内存4G、....

1.安装 tar -zxvf apache-zookeeper-3.6.1-bin.tar.gz //解压zookeeper安装包 tar –zxvf kafka_2.12-2.6.0.tgz //解压kafka....

Redis 1. Nosql概述 为什么要用Nosql 大数据时代，一般的数据库无法进行处理了！2006年Hadoop Hadoop是一个由Apache基....

简介：作为现今IT领域最重要的课题：基础设施云化，离不开与伙伴的携手合作，如何让云上解决方案能充分释放价值的同时形成一....

本章重点 数据可能分散在许多文件或数据库中，存储的形式也不利于分析。本章关注可以聚合、合并、重塑数据的方法。 总结 8.1....