
任何新技术的发展都会经历一个从被公众了解到最终普遍应用的过程。大数据技术作为一个新兴的数据处理技术,经过了近十年的发....
Docker最核心的特性之一,就是能够将任何应用包括Hadoop打包到Docker镜像中。这篇教程介绍了利用Docker在单机上快速搭建多节....
一、引言:Hadoop的HDFS集群非常容易出现机器与机器之间磁盘利用率不平衡的情况,比如集群中添加新的数据节点,节点与节点之....
上次见到(膜拜)Hadoop之父Doug Cutting是在2年前,2014中国大数据技术大会上。今年Hadoop10岁,刚看到他的Hadoop十周年贺词....
随着Hadoop数据资源池的概念进入主流IT,越来越多的企业开始试水Hadoop。但很多只是将一部分数据池化,还没有开发出成熟的Ha....
Hadoop对于long、int (化成long进行编码)的编码设计了自己的一套编码方式,这是一个zero-compressed encoded的变长编码方....
目前我们正处于二十一世纪第二个十年的中间阶段。在关于大数据的狂热炒作于五年前刚刚兴起之时,人们达成了Hadoop将在未来成....
对Hadoop与Spark孰优孰劣这个问题,最准确的观点就是,设计人员旨在让Hadoop和Spark在同一个团队里面协同运行。直接比较Hado....
在未来的物联网趋势下,思科希望能够通过和气生财,而物联网将会是大量数据的来源,因此,思科与Cloudera、Hortonworks及Map....
上次我们已经搭建了Hadoop的伪分布式环境,并且运行了一下Hadoop自带的例子–WordCount程序,展现良好。但是大多数时候还是....
对Hadoop与Spark孰优孰劣这个问题,最准确的观点就是,设计人员旨在让Hadoop和Spark在同一个团队里面协同运行。直接比较Hado....
HDFS数据管理1、设置元数据与数据的存储路径,通过dfs.name.dir,dfs.data.dir,fs.checkpoint.dir(hadoop1.x)、hadoop.tmp.....
一提到大数据处理,相信很多人***时间想到的是 Hadoop MapReduce。没错,Hadoop MapReduce 为大数据处理技术奠定了基础。近....
***堂课:大数据集群搭建葵花宝典由浅入深,四步成“狮”1)快速搞定伪分布Hadoop集群搭建2)高可用的5节点Hadoop分布式集群搭....
在2016 Hadoop技术峰会的主题演讲上,星环科技创始人孙元浩深入浅出的阐述了Hadoop是如何推动数据仓库技术进行深刻变革。一....
运营商之困移动互联网时代的今天,手机不再仅仅是个通讯工具,它是钱包(手机支付),是商店(手机淘宝),是地图(手机导航),是....
零基础学习hadoop,没有想象的那么困难,也没有想象的那么容易。从一开始什么都不懂,到能够搭建集群,开发。整个过程,只要....
五年前,Hadoop用可以解决所有大数据难题的身份杀入主流市场。如今尘埃已经落定,现在是时候对Hadoop展开更切合实际的评估了....
在学习hadoop之前,我就明确了要致力于大数据行业,成为优秀的大数据研发工程师的目标,有了大目标之后要分几步走,然后每一....
Hadoop并不完全代表云计算,所以,要用Hadoop搭建完整的云计算平台,答案是不够。我们常说云计算,实际上还是通过计算机的大....