1.Nosql概述
<svg xmlns="http://www.w3.org/2000/svg" style="display: none">
<path stroke-linecap="round" d="M5,0 0,2.5 5,5z" id="raphael-marker-block" style="-webkit-tap-highlight-color: rgba(0, 0, 0, 0)"></path>
</svg>
<blockquote>
感谢秦疆老师的redis 视频教程,更多了解哔哩哔哩搜索【狂神说 Java】。
本文内容源于秦疆老师的redis 视频教程。给狂神推荐,点赞吧!
-
nosql 讲解
-
阿里巴巴架构演进
-
nosql 数据模型
-
CAP
-
BASE
-
Redis 入门
-
Redis 安装(Window & Linux 服务器)
-
五大基本类型
-
String
-
List
-
Set
-
Hash
-
Zset
-
-
三种特殊的数据类型
- geo
- hyperloglog
- bitmap
-
Redis 配置详解
-
Redis 持久化
- RDB
- AOF
-
Redis 事务操作
-
Redis 实现订阅发布()
-
Redis 哨兵模式(大部分公司集群都用的是哨兵模式)
-
缓存穿透及解决方案
-
缓存击穿及解决方案
-
缓存雪崩及解决方案
-
基础 API 之 Jedis 详解
-
SpringBoot 集成 Redis 操作
-
Redis 的实践分析
为什么要用 Nosql
1. 单机 MYSQL 的年代
90 年代,一个基本的网站访问量一般不会太大,单个数据库完全足够!那个时候,更多的是使用静态网页 Html~ 服务器根本没有太大的压力!
思考一下,这个情况下:整个网站的瓶颈是什么?
- 数据量太大,一个机器放不下!
- 数据的索引(B+ Tree), 一个机器内存也放不下
- 访问量(读写混合),一个服务器承受不了 ~
只要你开始出现以上的三种情况之一,那么你就必须要晋级!
2.Memcached(缓存)+MySQL+ 垂直拆分
网站 80% 的情况下都是在读,每次都要查询数据库的话就十分的麻烦!所以说我们希望减轻数据的压力,我们可以用缓存来保证效率!
发展过程:优化数据结构和索引–> 文件缓存(IO)–>Memcached(但是最热门的技术)
3. 分库分表 + 水平拆分 +MySQL 集群
技术和业务在发展的同时,对人的要求也越来越高!
本质:数据库(读,写)
早些年 MyISAM: 表锁,十分影响效率!高并发下就会出现严重的锁问题
转战 Innodb: 行锁
慢慢的就开始使用分库分表来解决写的压力!MySQL 在那个年代推出了表分区! 这个并没有多少公司使用!Mysql 的集群,很好的满足那个年代的所有需求!
4. 最近的年代
技术爆炸
2010(按键手机)-2020,十年时间,世界发生了翻天覆地的变化;定位,也是一种数据,音乐,热榜
MySQL 等关系型数据库就不够用来!数据量很多,变化很快 ~!
浏览量 10w+ 以上,数据刷新很快,访问量很大,先存入缓存,过一段时间再持久化数据库。
MySQL 有的使用它来存储一些比较大的文件, 博客,图片!数据库表很大,效率就低了!如果有一种数据库来专门处理这种数据,MySQL 压力就变得十分小(研究如何处理这些问题!)大数据的 IO 压力下,表几乎没法更大!
目前一个基本的互联网项目!
为什么要用 NoSQL!
用户的个人信息!社交网络,地理位置。用户自己产生的数据,用户日志等等爆发式增长!
这个时候我们就需要使用 NoSQL 数据库,Nosql 可以很好的处理以上的情况!
什么是 NoSQL
NoSQL
NoSQL = Not Only SQL(不仅仅是 SQL)
关系型数据库:表格 ,行 ,列
泛指非关系型的数据库。随着互联网 web2.0 网站的诞生!传统的关系数据库在对付 web2.0 时代!特别是超大规模和高并发的社区!暴露出很多难以克服的困难,NoSQL 在当今大数据环境下发展的十分迅速,Redis 是发展最快的,而且是我们必须掌握的一个技术!
很多的数据类型,用户的个人信息,社交网络,地理位置,这些数据类型的存储不需要一个固定的格式(行,列)!不需要多余的操作就可以横向扩展(用多台机器去实现)!Map<String,Object> 使用键值对来控制!
NoSQL 特点
解耦!
1、方便扩展(数据之间没有关系,很好扩展)
2、大数据量高性能(Redis 一秒写 8 万次,读取 11 万;NoSQL 的缓存记录级,是一种细粒度的缓存,性能会比较高!)
3、数据类型是多样型的!(不需要事先设计数据库!随便取用!如果是数据量十分大的表,很多人就无法设计了!)
4、传统的 RDBM 和 NoSQL
传统的RDBMS
- 结构化组织
-SQL
- 数据和关系都存在单独的表中 row col
- 数据操作 ,数据定义语言
- 严格的一致性
- 基础的事务
-......
Nosql
- 不仅仅是数据
- 没有固定的查询语言
- 键值对存储,列存储,文档存储,图像数据库(社交关系)
- 最终一致性
-CAP 定理和 BASE
- 高性能,高可用,高可扩
了解: 大数据时代的 3V+3 高
大数据时代的 3V:主要是描述问题的
- 海量 Volume
- 多样 Variety
- 实时 Velocity
大数据时代的 3 高(互联网需求的 3 高):主要是对程序的要求
- 高并发
- 高可拓
- 高性能
真正在公司的实践:NoSQL+RDBMS 一起使用才是最强的,阿里巴巴的架构演进!
技术没有高低之分,就看你怎么去使用!
阿里巴巴的架构演进
思考:一个电商网站如此多的数据都用一个数据库吗?
技术急不得,越是慢慢学,才能越扎实!
如果是未来相当一个架构师,没有什么是加一层解决不了的!
# 1、 商品的基本信息
名称 、价格 、商家信息:
关系型数据库就可以解决了!MySQL/Oracle
#2、商品的描述、评论(文字比较多)
文档数据库中 ,MongDB
#3、图片
分布式文件系统 FastDFS
- 淘宝自己的 TFS
-Google 的 GFS
- Hadoop HDFS
- 阿里云的 oss
#4、商品的关键字(搜索)
- 搜索引擎 solr elasticsearch
-ISearch : 多隆(牛逼的技术大佬)
#5、商品热门的波段信息
- 内存数据库
-Redis Tair Memache..
#6、商品的交易,外部的支付接口
- 三方应用
推荐阅读:阿里云的这群疯子
所有牛逼的人都有一段苦逼的岁月!但是你只要像傻逼一样的去坚持,终将牛逼!
NoSql 的四大分类
1. KV 键值对:
- 新浪:Redis
- 美团:Redis + Tair
- 阿里、美团:Redis + memecache
2. 文档型数据库(bson 格式 和 json 一样):
- MongoDB(一般必须要掌握)
- MongoDB 是一个基于分布式文件存储的数据库,C++ 编写,主要用来处理大量文档
- MongoDB 是一个介于关系型数据库和非关系型数据库中间产品!MongoDB 是非关系型数据库中功能最丰富,最像关系型数据库的!
- ConthDB
3. 列存储数据库:
- HBase
- 分布式文件系统
4. 图关系数据库:
- 不是放图形的,是放关系的,比如: 朋友圈设计网络,广告推荐!
- Neo4j ,InfoGrid
四者对比
狂神语录:敬畏之心可以使人进步!
活着的意义?追求幸福(帮助他人,感恩之心),探索未知(努力的学习!)
再次感谢狂神的视频! 有兴趣的朋友哔哩哔哩搜索【狂神说 Java】。