前沿技术知识_前沿技术学习笔记

/** * 五种工作模式 * 1.Basic Queue 简单模式 * 一个生产者一个消费者 不需要设置交换机 使用默认得交换机 * * 一个消费消....

目录  同步调用： 异步调用  初识MQ      同步调用： 比如这里的支付服务，需要等待订单服务、短信服务...执行完....

@ConfigurationProperties默认读取的是全局配置文件（工程创建成功后自带application.properties文件），所以如果我们需要导....

以下文档点击即可进入 Spark 3.2.1 官方文档 Spark 3.2.0 官方文档 Spark 3.1.3 官方文档 Spark 3.1.2 官方文档 Spark 3.1.1....

前言 本文总结如何只用SQL迁移关系型数据库中的表转化为Hudi表，这样的意义在于方便项目上对Spark、Hudi等不熟悉的人员运维....

目录 Hadoop RPC框架原理 RPC类（org.apache.hadoop.ipc.RPC）分析 ProtobufRpcEngine类分析 应用层分析 Hdfs getBlockLocat....

php操作ElasticSearch es-php客户端安装 php环境版本要求： PHP >=7.1.0 ext-curl ext-json es-php扩展下载地址： https://w....

ES 安装完，es-head 安装完，还差个可视化的 kibana Download Kibana Free | Get Started Now | Elastic 解压，目录移动到和....

随着工业互联网产业的发展，边缘智能与实际应用深度融合。工业互联网的功能已经从统一的数据访问管理发展到工业机制、组件、....

环境信息 ubuntu hadoop 3.3.1spark 3.2.1jdk 1.8.231scala 2.12.15 问题描述 已经安装好单节点hadoop，并验证成功，可以访....

1. 少用count(distinct ) 建议用group by 代替 distinct 。 原因为count(distinct)逻辑只会有一个reducer来处理,即使设定....

将交通大数据+AI能力应用于“情、指、勤、督”一体化建设 行业痛点 人手短缺问题 我国警民比例低，交管业务量巨大，长期存在....

这里的描述来自官方： 死信交换 来自队列的消息可以是“死信”；也就是说，当发生以下任何事件时，重新发布到交易所： 消费....

centos7虚拟机安装 文章目录 centos7虚拟机安装先放上centos7镜像下载地址一、新建虚拟机二、虚拟机设置1.开启虚拟机2.登录....

建设内容 1、全域搜索：通过搜索框，可实现平台已采集并标准化的基础和业务数据的全量快速检索，确保纪检监察人员不遗漏任何....

CDH初期部署时没有做权限控制，现在需要加权限，下面是添加权限的过程。 1.登录hive,查看角色，报错： hive> show roles; FA....

为什么要做资产梳理 面向互联网的系统暴露的信息越多，如端口、后台管理系统、与外单位互联的网络路径等信息，越容易被攻击....

背景  喜马拉雅成立之初，各个业务管理各自的数据库、缓存，个业务都要了解中间件的各种部署情况，导致业务间的合作，需要....

本章重点 数据可能分散在许多文件或数据库中，存储的形式也不利于分析。本章关注可以聚合、合并、重塑数据的方法。 总结 8.1....

简介：作为现今IT领域最重要的课题：基础设施云化，离不开与伙伴的携手合作，如何让云上解决方案能充分释放价值的同时形成一....