大数据系统知识_大数据系统学习笔记

package com.bigdata.spark.core.rdd.builderimport org.apache.spark.rdd.RDDimport org.apache.spark.{SparkConf, SparkContex

编者按：本文从企业数据安全性、部署问题困难等情况出发，系统分析了SaaS部署和本地部署优缺点，为大家选出最适合企业发展的....

2月14日，国务院发布了《“十四五”国家应急体系规划》。《规划》对“十四五”时期安全生产、防灾减灾救灾等工作进行全面部....

文/刘江 3月6日，我与全球媒体同行一起，亲身感受了心仪已久的微软研究院年度技术盛会——技术节(TechFest)。 这个活动每年....

1.创建相关文件夹 sudo mkdir /usr/local/src/phoenixsudo chown -R ucmed:ucmed /usr/local/src/phoenix 2.拷贝bin文件 cd....

拥有“全民流量”的抖音拥有巨大的商业价值空间。所以，抖音变现的思路就是流量变现的思路。移动互联网时代，流量不一定等于....

在互联网浪潮下，银行金融服务催生出新业态。大中型银行纷纷入局场景生态化建设，以驱动线上获客渠道。目前，商业银行场景金....

一、组成架构 NameNode+DataNode+Client+Secondary NameNode NameNode：主管。 1）管理HDFS命名空间 2）配置副本策略 3）管....

报告页数: 150 图表数: 100 报告价格：¥16800 本文研究全球与中国市场LTE网络中的无线安全的发展现状及未来发展趋势，分别....

centos7-ssh免密配置 一、确认openssh软件已安装。二、查看ssh服务端配置1.进入ssh配置文件目录，并查看目录配置文件2. 创建....

背景 最近在跑 sparkSQL的时候，执行到一半，频繁打印日志报错： WARN TaskMemoryManager: Failed to allocate a page (1048....

使用  to_unix_timestamp('20220213','yyyyMMdd') 在linux shell中执行：spark-sql -e "select to_un....

直接上代码 shell脚本 #!/usr/bin/env bash# 上传# /bin/bashworkhome=/opt/sqoop/one_makehdfs_schema_dir=/data/dw/ods/on....

用dbeaver工具连接clickhouse数据库 建表语句： CREATE TABLE kafka_clickhouse_os.ldy_pageclick(`id` String COMMENT ....

mysql学习 创建表的时候 晋江加上 create_time字段，为create_time设置默认值CURRENT_TIMESTAMP CRUD操作 Create（ 增 ） ....

经过近一年的等待，《大数据原理与实战》新书上市！！先睹为快！！！ 《大数据原理与实战》(赵渝强)【摘要 书评 试读】- 京....

问题： Caused by: org.springframework.boot.web.server.WebServerException: Unable to start embedded Tomcat 网上原因....

拉取kafka和zookeeper两个镜像 docker pull wurstmeister/zookeeper docker pull wurstmeister/kafka 2.启动zookeeper dock....

config/elasticsearch.yml配置文件 xpack.security.enabled: true 地址必须为https 就会需要安全验证此时如果我们忘记密码....

K8s - 目录 K8s - 3 核心概念 - 13 调度器 一、kubernetes 核心技术-调度器1. 概述2. k8s 调度工作方式3. k8s 调度器4. 节....