大数据知识_大数据学习笔记

1.编排工具 docker-compose 查看版本   docker-compose -v 2.可视化工具 portainer 2.1 拉取portainer镜像 # 可以选....

随着移动电商与社交电商的分流，流量趋于分散化，传统电商的弱点也越来越明显，“竞争难度大”、“获客成本高”、“同质化严....

解决ruok is not executed because it is not in the whitelist. 前言问题描述解决问题 前言 zookeeper的四字命令 zookeeper....

简单粗暴的理解：Dataphin是数据中台的ETL工具，可以对各种的数据源数据进行抽取、清洗。而MaxCompute是云原生的大数据存储....

企业越大，需要的数据和产生的数据也就越多，而数据越多则意味着就越需要定制适合企业自身的正式且有效的数据质量策略。在向....

适用于批处理, 适用于把使用频率比较高的文件放到本地task内存中， 注意：需要我们缓存的文件在任务运行期间最好是只读状态....

互联网时代，接触“理财”的人越来越多，想要理财的人也不在少数，但要实践“理财”，下边的基本常识你就得不得了解。 保弘....

参考：https://www.elastic.co/guide/en/elasticsearch/reference/7.5/query-dsl-mlt-query.html 对应的代码为： { "quer....

随着大数据的发展，各行各业都面临越来越庞大且复杂的数据，这些数据如果不能有效管理起来，不但不能成为企业的资产，反而可....

flink1.13用什么策略把数据发送到下个算子中呢？ 在分布式计算中，flink把数据集依据不同的策略发送到下游算子中，而策略的....

目录 1. presto的内存结构2. 参考文献 1. presto的内存结构 下图是presto-worker节点的内存示意图： 图片来源于互联网 可以....

中国海运物流SaaS市场现状研究分析 本文研究中国市场海运物流SaaS现状及未来发展趋势，侧重分析在中国市场扮演重要角色的企....

一.报错异常： Caused by: java.security.AccessControlException: access denied ("java.lang.RuntimePermission" "setCont....

本文的基础环境可以参考flink 1.10.1 java版本wordcount演示 (nc + socket) 这里采用静态数据进行模拟商户订单数据。当接收....

目录 什么是数据挖掘？ 数据挖掘步骤 有哪些实用的数据挖掘工具？ 你想学习数据分析吗？ 开口闭口大数据，可是，数据从哪里....

hive 集合函数 size(列名)：求array、map长度map_keys(列名)：拿map里所有key值 ,  map_values  拿所有value值array_con....

近日，深圳市硅格半导体有限公司（以下简称“硅格半导体”）签署了CLA（Contribution License Agreement，贡献者许可协议）....

文章目录 Hadoop概述什么是Hadoop：分布式存储框架：HDFS分布式计算框架：MapReduce资源调度和管理平台：YARN Hadoop的版....

目录 1.服务端命令 1.1 appendToFile 追加到文件 1.2 copyFromLocal 从本地拷贝 1.3 copyToLocal 下载文件到本地 1.4  cou....

经过几个月的努力奋战，赶在新年到来之际，我们也即将迎来OpenAtom-XuperChainV5.2版本啦（撒花）！全新版本将于近期上线，....