
HDFS_01_Hadoop简介 持续更新大数据文章 … 本篇文章学的是 Hadoop 生态圈里面的 HDFS,HDFS 是解决大数据海量数据存储的....
1、Hive是什么? Hive 是建立在 Hadoop 上的数据仓库(Data Warehouse)基础构架。它提供了一系列的工具,可以用来进行数....
统一的批处理与流处理系统 在大数据处理领域,批处理任务与流处理任务一般被认为是两种不同的任务,一个大数据项目一般会被....
2016年硕士毕业入行大数据至今,换过三家公司,当前就职于某国企大数据工程师 1、 行业:这些年一直从事大数据行业,主要是....
元宇宙的热度来的比预想的快不少,甚至在巨头们还在摩拳擦掌之时,市场已经发生了激烈反应。或许我们已经很难去探明究竟是元....
目录 1、啥是MQ2、为啥要用MQ3、RabbitMQ 的概念4、四大核心概念5、RabbitMQ 核心部分6、各个名词介绍Hello WorldWork Queue....
通过对Hadoop的学习和使用一段时间后,都是用自己的电脑内的虚拟机,那么接下来尝试连接其他电脑,巩固环境搭建。同时也为了....
1.概念 用Java和Scala编写的流处理框架和分布式处理引擎对于无界和有界数据流进行有状态计算(无界,实时、有界,离线 批处....
允中 发自 副驾寺量子位 报道 | 公众号 QbitAI 无人驾驶商业化落地怎么走? 现无定式、无定理,但不同玩家正在走出自己的道....
1. locate 判断 name 字段中是否包含字符串 “aaa”: select * from temp where locate("aaa", name) > 0; ocate....
一、Hive的安装 1.首先使用xftp将 apache-hive-3.1.2-bin.tar.gz 传到虚拟机,解压缩至/usr/local并更改文件权限。 sudo tar....
面试吹牛之前先打个草稿! 本文首发于微信公众号【五分钟学大数据】,公众号上有很多大数据学习方法,学习文档,最全的大....
0,目标 通过flume采集日志写入HDFS,采集通道如下图所示,由两个flume组成一个从日志文件到HDFS的通道: 上面的第二个flum....
十四五规划今年是第一年,会计信息化——财务领域成为需要重点发展的板块,继九月份官方出台文件《会计改革与发展“十四五”....
1、MQTT是一种消息传输协议,和我们常用的RabbitMq比较类似,不过MQTT我们基本都是用于在物联网(比如说连接边缘计算机采集P....
据国外媒体报道,全球最大的云服务提供商之一谷歌云(Google Cloud)于当地时间11月16日出现了宕机,导致许多依赖于谷歌云的....
分布式事务场景 单体应用中访问多个数据库实例(跨数据库实例)多个微服务应用(跨JVM)访问同一个数据库实例 分布式事务解....
ps aux|grep elastic|grep /bin/java|awk '{print $2}'|xargs kill -9/home/azureuser/elasticsearch-7.15.2/bin/....
假设这些信息都存存储在一个文件里 时间数 省份 城市 用户 广告 如下所示: (中间字段使用空格隔开) (1)数据转换为键值....
区块链的发展以及应用是趋势所在,从目前的应用情况来看,很多的领域都取得了不错的效果,解决了原有领域存在的一些问题。而....