大数据知识_大数据学习笔记

spark是一个实现快速通用的集群计算平台。它是由加州大学伯克利分校AMP实验室 开发的通用内存并行计算框架，用来构建大型的....

随着社会与科技的快速发展，人工智能也进入了高速发展的轨道。人工智能确确实实地给我们生活带来了很多的便利。不仅仅是从我....

场景：为了优化通过spark sql查询hive中数据的查询效率，在创建表时需要指定压缩方式，将数据压缩，以此提高查询效率。 第一....

kafka 2.13-2.8.0 安装部署【单机版】及kafka-eagle web安装 kafka启动 ##1 软件参数 kafka 版本 2.13-2.8.0 zookeeper版....

随着5G、物联网、大数据等新一代信息技术的快速发展，人工智能作为社会数字化转型的重要底层技术，已经应用到智慧城市、新型....

在修改 Hbase某个表数据的存储时间时，update进度会卡住  在hbase ui上发现该表有47个region长时间处于RIT状态，正好跟卡....

目录 Hive备份： 1.main脚本： 2.目录结构： 3.设置crontab： 数据统计： 1.初处理备份文本： 2.1ETL处理第一步的文件： 文....

添加数据记录的第二种方法 用python类方法 views.py的写法，调用了Person类的create类方法 def add_person_2(request): #....

文章目录 安装mysql安装ambari-server 安装mysql yum install mariadb* -yservice mariadb startchkconfig mariadb on 配置m....

1、 资源配置调优 Flink性能调优的第一步，就是为任务分配合适的资源，在一定范围内，增加资源的分配与性能的提升是成正比的....

SparkConf SparkConf的介绍SparkConf类的定义介绍SparkConf配置项的设置SparkConf配置项的获取SparkConf配置项的校验 Spark....

ElasticSearch，简称ES， 是一个基于Lucene的分布式全文搜索服务器，和SQL Server的全文索引（Fulltext Index）有点类似，都....

在工作中遇到这样一个场景，需要找出数据库中所有的电话号码的字段。因此写一个程序自动去获取，因为一个服务器中数据库大概....

包含Hadoop ，Zookeeper，Kafka组件安装 文章目录 HadoopHadoop部署配置集群配置历史服务器分发Hadoop群起集群Hadoop群起脚....

一、首先是MySQL的一键安装和卸载的命令（任意选其一执行即可） （1）安装命令 sudo apt-get install mysql （下载最新版本....

问题1： max virtual memory areas vm.max_map_count [65530] is too low, increase to at least [262144] 答：在宿主机上修....

查看行业专题分析报告就上参一江湖，更多专题报告持续更新中。每项专题报告都是从2019开始更新到至今，后续将持续更新... 今....

rabbitmq-server 发现报错: {“Kernelpidterminated”,application_controller,"{application_start_failure,credentials_ob....

Flask-SQLAlchemy Flask-SQLAlchemy 是一个 Flask 扩展，简化了在 Flask 程序中使用 SQLAlchemy 的操作。SQLAlchemy 是一个....

前言： 自Zookeeper-3.4.0版本开始，就提供了自动清理事务日志和快照日志的功能。 我们可以想一下，如果不清理这些日志会怎....