大数据系统知识_大数据系统学习笔记

第0步：下载Logstash 下载网址：https://www.elastic.co/cn/downloads/logstash 百度网盘有7.12和7.6版本的：https://pan.b....

目前中国产业园区数量较多，同质化问题严重，相互之间竞争激烈。随着大数据时代的到来，大数据和社会经济的深度融合，产业园....

转载自 KafkaUtils.createDirectStream()参数详解 - 海贼王一样的男人 - 博客园 通过KafkaUtils.createDirectStream该方法....

解决： 查看zookeeper的配置文件zoo.cfg vi /opt/cloudera/parcels/CDH/lib/zookeeper/conf/zoo.cfg dataDir=/var/lib/zooke....

docker 端口号放行（阿里云或腾讯云）如果有宝塔（宝塔的端口号放行）如果要访问管理界面时一定要开启权限 端口号放行（阿里....

1.   背景 互联网时代，也是用户量为王的时代，海量的用户对系统的高并发高吞吐提出新的要求，搜索引擎搜索性能高数据库百....

部署ES+Kibana # es 暴露的端口很多！# es 十分耗内存# es 的数据一般需要放置到安全目录—>需要挂载# 启动【此时是官方提....

EurekaServer服务接口暴露策略 1)启动时注册的jersey Filter 2)jerseyApplication细节配置，指定包加载   EurekaServe....

文章目录 工作流调度器AzkabanAzkaban使用Flow 2.01. 入门案例 HelloWorld2. 单job有多个command3. 包含多个有依赖关系job的....

1，环境概述：            日志分析是运维工程师解决系统故障，发现问题的主要手段。Linux操作系统中日志主要包括....

import java.io.IOExceptionimport java.security.PrivilegedExceptionActionimport java.utilimport com.alibaba.fastjson.JSON

本机系统windows10Hadoop是hadoop-3.2.0，替换hadoop.dll 和winutils.exe （直接换掉bin目录） github找 https://github.com....

前言 ZooKeeper集群里有一个Leader和若干个follower。当一台服务器初始化启动或集群中的Leader挂掉时，会发生选举。 相关概....

这里写自定义目录标题 遇到问题解决引用 Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. ja....

新年在你心中是什么？你又会选择什么方式描述它？无论我们对新年的想象如何，它总是与“希望”紧密联结。 在新年来临之际，....

数据中台定义 数据中台概念由阿里提出，即实现数据分层和水平解耦，沉淀公共数据能力，提供数据模型、数据服务与数据开发功....

自定义触发器         实际工作中，可能会遇到想控制Flink数据流速度的情况，比如每5秒最多输出3条数据，这时候如果....

SheepDex是BSC第一个拥有流动聚合功能的交易平台，于新加坡时间2021年10月10日正式上线。在上线的两个月时间，平台提供了高....

关于制造企业需要实现哪些信息化？又如何实现？其实现在有很多专业资料可以供给我们参考学习。这篇文章，以传统印刷包装企业....

Java零基础入行课程大纲详解 内容有点多，你忍一下！ 文章目录 Java零基础入行课程大纲详解前言一、SSM框架一、MyBatis二....