大数据知识_大数据学习笔记

近日，教育部颁布了《教育部办公厅关于设立教育部基础教育综合改革实验区的通知》，决定在全国12地市设立教育部基础教育综合....

省去上传步骤请自行上传 解压后配置环境变量 #SPARK_HOME export SPARK_HOME=/usr/apps/spark-2.1.1export PATH=$SPARK_HOME....

目录 1- Flume2- Fluentd3- Logstash4- Chukwa5- Scribe6- Splunk7- Scrapy 1- Flume Flume作为Hadoop的组件，是由Cloudera....

生产者消费者问题 编程模型: 有一家店,有很多人来,为了提升顾客体验,前台可以放10份餐,不足10份后厨就会通知后厨补上,如果到....

文章目录 restful、lucene简介elasticsearch核心概念elasticsearch与数据库对比kibana操作elasticsearch restful、lucene简....

文章目录 前言先行概念什么是rpcrpc与dubbo框架为什么项目中会使用到dubbo协议呢？ 代码示例基于zk+dubbo实现soa项目工作原....

别名查看 curl -s IP:9200/performance_v1_20200225/_alias?pretty 创建别名 curl -XPOST "IP:9200/_aliases" -H 'Con....

Filecoin主网一周年庆典上胡安发言：Filecoin将发布虚拟机，实现智能合约功能。达到每秒万亿次交易处理能力，打造全球互联网....

首先我们假定读者对Gremlin语句有一定的了解，那么Traversal就是对gremlin语句用java语法中的方法进行拼接。看一下JanusGrap....

前言 这里主要介绍了关于Impala如何管理其元数据的原理，方便日后对其进行性能及可拓展性调优。 Impala架构 impala组成架构....

HDFS写数据流程 1.客户端通只名称节点（SecondaryNameNode)：我要写文件了，确认客户端权限以及没有相同的文件后，SNN创建一....

文章目录 窗口概念Window API窗口函数Aggregate 示例其他API说明总结 窗口概念 一句基于Flink流处理引擎的块处理的最佳方案....

最近在听人工智能的讲座，听了人工智能在各行业中的应用，发现如果我若是在网上购物，或是简单到咬一口苹果，这中间都发生了....

消息中间件的应用场景 1、跨系统数据传递 2、高并发的流量削峰 3、数据的分发与异步处理 4、大数据分析与处理 5、分布式事务....

HDFS —集群迁移 Apache 和 Apache 集群间数据拷贝 1 ） scp 实现两个远程主机之间的文件复制 ....

RabbitMQ安装和类型介绍 一：简介 AMQP，即Advanced Message Queuing Protocol，高级消息队列协议，是应用层协议的一个开放....

ZooKeeper下载安装（Windows版本）_IT生涯——知其然知其所以然-CSDN博客_zookeeper下载

kafka创建topic并发送数据 /opt/kafka/bin/kafka-console-producer.sh --broker-list 192.168.9.99:9092 --topic topicName1....

MapReduce体系结构 MapReduce体系结构主要由四个部分组成，分别是：Client、JobTracker、TaskTracker以及Task。   Client ....

最简单的测试方法 select sum(a),sum(b)from( select 1 as a,2 as b union all select 1 as a,-2 as b) ....