大数据知识_大数据学习笔记

关键技术点 MySQL数据库编程、单例模式、queue队列容器、C++11多线程编程、 线程互斥、线程同步通信和unique_lock、基于CAS....

Hadoop单机模式的搭建 JunLeon——go big or go home 前言：Hadoop集群有三种运行模式，即单机模式，伪分布模式、分布式模式....

Hadoop集群完全分布式的搭建 JunLeon——go big or go home 目录 Hadoop集群完全分布式的搭建 1、分布式集群的网络和节点规....

目录 ​ 基本认识 大数据背景？为什么它很大？ 什么是数据仓库？ 什么是数据湖？ 数据湖与数据仓库——主要区别 数据湖和数....

轻松连接数据库 前言常见数据库MysqlOraclesql-serverPostgreSQLMongoDBRedis 前言 相信很多小伙伴在使用python进行自动化....

基于Python开发的实现类似天眼查、企查查的企业大数据sass功能，实现了企业68多个纬度的数据聚合采集。这是一套python源码，....

1、数据库用小写字母+下划线命名，不允许驼峰式命名法，通常的命名规则为主业务前缀(如jld)， 存储主要业务数据名称(如car)....

SpringBoot整合RabbitMQ，开启手动应答，失败重传机制 1 创建项目，导入相关依赖2 RabbitMQ连接配置3 编写消息接发组件3.1 ....

压缩技术概述 是否采用压缩 MapReduce支持的压缩技术 记住： 1.支持切片的只有bzip2和lzo 2.lzo不是hadoop自带，需要额外....

Python操作数据库，相对于其它语言，要简单不少！ Mysql的安装以及建库建表操作就不说了，我这里本地创建了一个数据库py，以....

和其他所有的计算框架一样，Flink 也有一些基础的开发步骤以及基础，核心的 API，从开发步骤的角度来讲，主要分为四大部分 ....

今年准备保研期间，我在网上看了许多保研经验贴，受益匪浅。 如今尘埃落定，那么我也将自身经历详细写出，希望对学弟学妹们....

文章目录 前言一、学习爬虫前所需掌握的内容二、爬取数据2.1 如何存储数据2.2 获取html网络数据2.3 获取json网络数据2.4 获....

1、技术背景          物联网产品使用的mqtt连接功能采用的kawii-mqtt软件包，具体的软件包地址在：[kawii mqtt软件包....

1集群规划、配置说明 1.1系统说明 表1.1 集群系统说明表 操作系统主机名IP地址CentOS-7-x86_64-DVD-2009 master192.168.1....

随着网络信息的高速普及，智能手机的更新换代，越来越多的学生都拥有个人智能手机。虽然家长的初衷大都是想让孩子汲取到最新....

2021SC@SDUSC 目录 安装HadoopLinux虚拟机XShell和XftpJDKHadoop安装Hadoop配置 安装HiveHive总体流程与任务分配 到写这篇....

SCALA 第一章 Scala入门 1.1 概述 1.1.1 Scala简介 Scala的全称为Scalable Language，即“可伸缩的语言”，其设计目标是希望....

【真】Jmeter连接Oracle数据库 前言：今天用jmeter准备连接oracle数据库做接口测试，结果按百度的内容，都行不通，最后问了....

适用于中小型企业，仅供参考！！！ 一、磁盘容量预估 用户数基本固定 总用户数(个)：A每个用户每天产生的数据条数(条)：B....