大数据知识_大数据学习笔记

京东云产品 本项目由京东云投递并参与“数据猿年度金猿策划活动——2021大数据产业创新服务产品榜单及奖项”评选。 数据....

1.背景 在使用datax导数据到hive分区表中，配置写入目录为hive表分区为dt=datax,如果不提前创建该分区，会报目录不存在错误....

行转列 表名 ods.ods_user_from ， 字段 prov ,city 1、concat(字段a,’-’,字段b) ，concat函数参数有一个为NULL 返回....

安装zookeeper的前提：关闭防火墙 查看防火墙状态： systemctl statues firewalld 启动防火墙： systemctl start firewalld ....

77.1 演示环境介绍 RedHat版本：7.3CM和CDH版本：5.13.1已启用Kerberos 77.2 操作演示 在集群中选择一台服务器作为OozieServ....

持续更新中… Redis 1、Redis基础数据类型有哪些？ 2、Redis为什么设计为单线程？ 3、Redis持久化方式有哪几种？分别有什么....

hadoop2.x hdfs web界面 端口号50070 hadoop3.x hdfs web界面：http://localhost:9870/ 服务若部署在阿里云Linux机器的话，....

注意：需要导入jquery.js以及echarts.js echarts.js：下载 - Apache ECharts jquery.js：Download jQuery | jQuery 注意：js....

基于大数据平台的城市规划设计 城市规划是典型的大数据应用领域。沃达德大数据平台结合城市相关的大数据可以进行很多与城市....

1. 背景 因业务需求hive表需要使用parquet格式文件，但是datax导入时不支持parquet格式文件，于是手动开发hdfswriter 官方文....

第一步  获取数据源 1.安装nginx  sudo apt-get install nginx   安装过的如下：  2.上传shop.html 文件到 /var/www/s....

一、将安装包上传到centos7 官方安装包下载地址：https://archive.apache.org/dist/zookeeper/ 二、解压 tar -xvf zookeepe....

还是先极简介绍一下EMR是什么，Amazon EMR 基于 Hadoop 的开源框架将您的数据分布在可重新调整大小的 Amazon EC2 实例集群中....

Consumer API Consumer 消费数据时的可靠性是很容易保证的，因为数据在 Kafka 中是持久化的，故不用担心数据丢失问题。 由于....

第一步:下载kafka  Apache Kafka  第二步:上传kafka taz包到linux服务器 (rz 传输)  第三步: 解压taz包  tar -xzf  k....

3 深度学习 3.1 概述 数据的井喷和计算力的飙升，推动深度学习取得巨大进步。如果说深度学习是一台探矿机，大数据就是那座有....

欢迎关注公众号，一起进步，共同成长。     15-1 Java反射机制概述 15-2 理解Class类并 获取Class的实例 ....

[root@localhost es]# rpm -ivh elasticsearch-6.4.0.rpm 警告：elasticsearch-6.4.0.rpm: 头V4 RSA/SHA512 Signature, 密钥....

Hive Hadoop修改mysql安装卸载Centos7自带的mariadb安装 Mysqlmysql 初始化设置mysql 配置 Hive安装Hive 启动 基于hadoop....

IntelliJ IDEA 2021.3 为开发者打造最高效智能的开发工具 DataGrip 2021.2.2非常实用专业的数据库管理编程软件 Navicat 15 f....