栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

狂神说 redis 笔记

狂神说 redis 笔记

狂神说 redis 笔记 Nosql概述 为什么要学Nosql

我们先在处于大数据时代,大数据一般的数据库无法进行分析处理了!2006 Hadoop

压力一定会越来越大,适者生存!一定要逼着自己学习,这是在这个社会生存的唯一法则!

1、单机MySQL的时代

90年代,一个基本的网站访问量一般不会太大,单个数据库完全足够!

那个时候,更多的去使用HTML~服务器根本没有太大的压力!

思考一个,这种情况:整个网站的瓶颈是什么?

    数据量如果太大,一个机器都放不下!数据的索引(B+Tree),一个机器内存也放不下访问量(读写混合),一个服务器承受不了!

只要你开始出现以上的三种情况之一,那么你就必须要晋级!

2、Memcached(缓存) + MySQL + 垂直拆分(读写分离)

网站80%的情况都是在读,每次都要去查询数据库的话十分麻烦!所以说我们希望减轻数据的压力,我们可以使用缓存来保证效率。

发展过程:优化数据结构和索引–>文件缓存(IO)–> Memcached(当时最热门的技术!)

3、分库分表 + 水平拆分 + MySQL集群

技术和业务在发展的同时,对人的要求也越来越高!

本质:数据库(读,写)

早些年MyISAM:表锁,十分影响效率!

转战Innodb:行锁

慢慢的就开始使用分库分表来解决写的压力!MySQL在哪个年代推出了表分区!这个并没有多少公司使用!
MySQL的集群,很好满足那个年代的所有需求!

4、如今最近的年代

2012~2022 十年之间,世界已经发生了翻天覆地的变化;(定位,也是一种数据,音乐,热榜!)

MySQL 等关系型数据库就不够用了!数据量很多,变化很快!

MySQL 有的使用它来储存一些比较大的文件,博客,图片!数据库表很大,效率就低了!如果有一种数据来专门处理这种数据,MySQL压力就变得十分小(研究如何处理这些问题!)大数据的 IO 压力下,表几乎没法更大!

目前一个基本的互联网项目!

为什么要用NoSQL!

用户的个人信息,社交网络,地理位置。用户自己产生的数据,用户日志等等爆发式增长!

这个时候我们就需要使用NoSQL数据库了,NoSQL可以很好的处理以上的情况!


什么是NoSQL

NoSQL

NoSQL = Not only SQL (不仅仅是SQL)

泛指非关系型数据库的,随着web 2.0互联网的诞生!传统的关系型数据库很难对付web 2.0时代!尤其是超大规模的高并发的社区!暴露出来很多难以克服的问题,NoSQL在当今大数据环境下发展的十分迅速,Redis是发展最快的,而且是我们当下必须掌握的一个技术!

很多数据数据类型的用户的个人信息,社交网络,地理位置。这些数据类型的存储不需要一个固定的格式!不需要多余的操作就可以横行扩展! Map 使用键值对来控制!

NoSQL特点

解耦!

    方便扩展(数据之间没有关系,很好扩展!)大数据量高性能(Redis 一秒写8万次,读11万,NoSQLf的缓存记录级,是一种细粒度的缓存,性能会比较高!)数据类型是多样型的(不需要实现设计数据库!随取随用!如果数据量十分大的表,很多人就无法设计了!)传统 RDBMS 和 NoSQL
传统的 RDBMS
- 结构化组织
- SQL
- 数据和关系都存在单独的表中  row col 
- 操作操作,数据定义语言
- 严格的一致性
- 基础的事务
- ......
NoSQL
- 不仅仅是数据
- 没有固定的查询语言
- 键值对存储,列存储,文档存储,图形数据库(社交关系)
- 最终一致性
- CAP 定理和 base  (异地多活)
- 高性能,高可用,高可扩
- .....

了解:3V和3高

大数据时代的3V:主要是描述问题

    海量Volume多样Variety实时Velocity

大数据时代的3高:主要是对程序的要求

    高并发高可拓高性能

真正在公司中的实践:NoSQL + RDBMS 一起使用才是最强的,阿里巴巴的架构演进!

技术没有高低之分,就看你如何去使用!(提升内功,思维的提高!)

阿里巴巴演进分析

技术急不得,越是慢慢学,才能越扎实!

开源才是技术的王道!

任何一家互联网的公司,都不可能只是简简单单让用户能用就好了!

大量公司做的都是相同的业务;(竞品协议)

随着这样的竞争,业务是越来越完善,然后对开发者要求也是越来越高!

如果你未来想当一个架构师:没有什么是加一层解决不了的!

# 1、商品的信息
	名称、价格、商家信息
	关系型数据库就可以解决了!MySQL/ Oracle (淘宝早些年就去IOE了!)
	淘宝内部的 MySQL 不是大家用的 MySQL(底层组件不一样)

# 2、商品的描述、评论(文字比较多)
	文档数据库中,MongoDB
	
# 3、图片
	- 分布式文件系统 FastDFS
	- 淘宝自己的   TFS
	- Gooale的    GFS
	- Hadoop     HDFS
	- 阿里云 	  OSS
	
# 4、商品的关键字(搜索)
	- 搜索引擎 solr  elasticsearch
	- ISerach:多隆(多去了解这些技术大佬!)

# 5、商品热门的波段信息
	- 内存数据库
	- Redis	Tair、Memache ...
	
# 6、商品的交易,外部的支付接口
	- 三方应用
	

要知道,一个简单的网页背后的技术一定不是大家所想的那么简单的!

大型互联网应用问题:

数据类型太多了数据源繁多,经常重构!数据要改造,大面积改造?

解决问题:

这里以上都是NoSQL入门概述,不仅能够提高大家的知识,还可以帮助大家了解大厂的工作内容!

NoSQL的四大分类

KV键值对:

新浪:Redis美团:Redis + Tair阿里、百度:Redis + memecache

文档型数据库(bson格式和json一样):

MongoDB(一般必须掌握)

MongoDB是一个基于分布式文件存储的数据库,C++编写,主要用来处理大量的文档!MongoDB是一个介于关系型数据库和非关系型数据库中中间的产品!是非关系型数据库中最功能最丰富的,最像关系型数据库的!ConthDB

列存储数据库

Hbase分布式文件系统

图关系数据库

它不是存图形,放的是关系,比如朋友圈社交网络,广告推荐!Neo4j ,InfoGrid

四者对比!

Redis入门 概述

Redis(Remote Dictionary Server ),即远程字典服务!

是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库,并提供多种语言的API。

redis会周期性的把更新的数据写入磁盘或者把修改操作写入追加的记录,并且在此基础上实现了master-slave(主从)同步!

免费和开源,是当下NoSQL最热门的技术之一!也被人称为结构化数据库。

Redis能干什么?

1、内存储存、持久化,内存中是断电即失,所以说持久化很重要(rdb aof)

2、效率高,可以用于高速缓存

3、发布订阅系统

4、地图信息分析

5、计时器、计数器(浏览量)

6、…

特性

1、多样的数据类型

2、持久化

3、集群

学习中需要的东西

官网(下载地址):

中文网:

注意:Windows这github上下载(停更很久了)!

Redis推荐都是在Linux服务器上搭建的,我们是基于Linux学习!

Windows安装

1、下载安装包:https://github.com/MicrosoftArchive/redis/releases

2、下载完毕得到压缩包:

3、解压到自己的环境目录下就ok了!redis 十分的小,就只有5M。

4、打开cmd窗口,跳转到redis绝对路径,然后输入:

redis-server redis.windows.conf 命令

这样就是安装完成了。

5、使用Redis客户端来连接redis

注意:redis那边小黑窗不用关闭!

记住一句话,Windows下使用确实简单,但是redis推荐我们去Linux下去开发使用!

Linux安装

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/748589.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号