基于内存的分布式NoSQL数据库Redis(一)介绍与安装

本文涉及的产品
RDS Agent(兼容OpenClaw),2核4GB
RDS AI 助手,专业版
RDS DuckDB + QuickBI 企业套餐,8核32GB + QuickBI 专业版
简介: 基于内存的分布式NoSQL数据库Redis(一)介绍与安装

基于内存的分布式NoSQL数据库Redis

知识点01:课程目标

  1. 整体目标
  • Redis:NoSQL数据库,实时存储
  • Kafka:消息队列,实时存储
  • Hbase:NoSQL数据库,实时存储
  1. Redis的基本介绍和使用
  • 功能与应用场景
  • Redis的使用:基于命令的操作、基于编程的操作【JavaAPI】
  • 多练习
  • Redis的存储设计:性能、安全
  • 思想:大道至简

知识点02:NoSQL与RDBMS

  • 目标:了解NoSQL的应用场景与RDBMS的区别
  • 路径
  • step1:RDBMS的特点
  • step2:业务架构中的问题
  • step3:NoSQL的特点
  • 实施
  • 工具:MySQL、Oracle、SQL Server……
  • 应用:业务性数据存储系统:事务和稳定性
  • 特点:体现数据之间的关系,支持事务,保证业务完整性和稳定性,小数据量的性能也比较好
  • 开发:SQL
  • 问题:以网站后台存储为例,当并发量很大,所有高并发全部直接请求MySQL,容易导致MySQL奔溃

  • 需求:能实现高并发的数据库,接受高并发请求
  • 工具:Redis、HBASE、MongoDB……
  • 应用:一般用于高并发高性能场景下的数据缓存或者数据库存储
  • 特点:读写速度特别快,并发量非常高,相对而言不如RDBMS稳定,对事务性的支持不太友好
  • 开发:每种NoSQL都有自己的命令语法
  • 解决上面RDBMS的问题:使用高并发缓存实现读写分离
  • 读请求:读请求不读取MySQL,读取Redis
  • 写请求:写请求直接写入MySQL

  • 小结
  • RDBMS和NoSQL的应用特点分别是什么?
  • RDBMS
  • 场景:业务数据库
  • 特点:稳定性高、事务支持比较完善、小数据量性能好
  • NoSQL
  • 场景:高并发高性能的数据存储
  • 特点:稳定性和安全性相对不如RDBMS,支持高并发和高性能

知识点03:Redis的功能与应用场景

  • 目标:掌握Redis的功能与应用场景
  • 路径
  • step1:介绍
  • step2:功能特点
  • step3:应用场景
  • 实施
  • 介绍
  • 相关网站
  • 官方介绍
Redis 是一个开源(BSD许可)的,内存中的数据结构存储系统,它可以用作数据库、缓存和消息中间件。 它支持多种类型的数据结构,如 字符串(strings), 散列(hashes), 列表(lists), 集合(sets), 有序集合(sorted sets) 与范围查询, bitmaps, hyperloglogs 和 地理空间(geospatial) 索引半径查询。 Redis 内置了 复制(replication),LUA脚本(Lua scripting), LRU驱动事件(LRU eviction),事务(transactions) 和不同级别的 磁盘持久化(persistence), 并通过 Redis哨兵(Sentinel)和自动 分区(Cluster)提供高可用性(high availability)。
  • 定义:基于内存的分布式的NoSQL数据库
  • 所有数据存储在内存中,并且有持久化机制
  • 每次redis重启,会从文件中重新加载数据到内存,所有读写都只基于内存
  • 功能特点
  • 功能:提供高性能高并发的数据存储
  • 特点
  • 基于C语言开发的系统,与硬件的交互性能更好
  • 基于内存实现数据读写,读写性能更快
  • 分布式的:扩展性和稳定性更好
  • KV结构数据库:支持事务、拥有各种丰富的数据结构
  • KV结构
  • 缺点:两列,不能满足复杂的业务存储
  • 优点:Value可以支持多种类型,满足不同需求的存储
  • String、List、Set、Hash、Zset:掌握这五种类型的读写命令
  • 应用场景
  • 缓存:用于实现大数据量高并发的大数据量缓存【临时性存储】
  • 网站架构中:接受高并发的缓存读写请求
  • 数据库:用于实现高性能的小数据量读写【永久性存储】
  • 大数据平台中:高性能:一般用于作为实时计算结果的存储

  • 消息中间件:消息队列【MQ】:用于实现消息传递,一般不用Redis
  • 小结
  • Redis的功能与应用场景是什么?
  • 功能:实现基于高性能和高并发的数据存储【基于内存】
  • 应用
  • 缓存:高并发来接受高并发的读写,大数据量,临时性存储,允许数据丢失
  • 数据库:高性能来接受数据的读写,小数据量,永久性存储,不允许数据丢失

知识点04:Redis的Linux版单机部署

  • 目标:实现Redis的Linux版单机部署
  • 实施
  • Windows版本安装及远程工具使用请参考随堂资料《Redis的Windows版安装及远程工具的使用.pdf》
  • 上传redis-3.2.8源码
cd /export/software/
rz
  • 解压
tar -zxvf redis-3.2.8.tar.gz -C /export/server/
  • 安装依赖
yum -y install gcc-c++ tcl
  • 如果已经安装过,执行命令结果如下:

  • 编译安装
#进入源码目录
cd /export/server/redis-3.2.8/
#编译
make
#安装,并指定安装目录
make PREFIX=/export/server/redis-3.2.8-bin install
  • 修改配置
  • 复制配置文件
cp /export/server/redis-3.2.8/redis.conf /export/server/redis-3.2.8-bin/
  • 创建目录
#redis日志目录
mkdir -p /export/server/redis-3.2.8-bin/logs
#redis数据目录
mkdir -p /export/server/redis-3.2.8-bin/datas
  • 修改配置
cd  /export/server/redis-3.2.8-bin/
vim redis.conf
## 61行,配置redis服务器接受链接的网卡
bind node1
## 128行,redis是否后台运行,设置为yes
daemonize yes
## 163行,设置redis服务日志存储路径
logfile "/export/server/redis-3.2.8-bin/logs/redis.log"
## 247行,设置redis持久化数据存储目录
dir /export/server/redis-3.2.8-bin/datas/
  • 创建软连接
cd /export/server
ln -s redis-3.2.8-bin redis
  • 配置环境变量
vim /etc/profile
# REDIS HOME
export REDIS_HOME=/export/server/redis
export PATH=:$PATH:$REDIS_HOME/bin
source /etc/profile
  • 启动
  • 端口:6379
  • 启动服务端
  • 启动命令
/export/server/redis/bin/redis-server /export/server/redis/redis.conf
  • 启动脚本
vim /export/server/redis/bin/redis-start.sh
#!/bin/bash 
REDIS_HOME=/export/server/redis
${REDIS_HOME}/bin/redis-server ${REDIS_HOME}/redis.conf
chmod u+x /export/server/redis/bin/redis-start.sh 
  • 启动客户端
/export/server/redis/bin/redis-cli -h node1 -p 6379
  • 关闭客户端
  • exit:退出客户端
  • 关闭服务端
  • 方式一:客户端中
shutdown
  • 方式二:Linux命令行
kill -9 redis的pid
  • 方式三:通过客户端命令进行关闭
bin/redis-cli -h node1 -p 6379  shutdown
  • 测试
node1:6379> keys *
(empty list or set)
node1:6379> set s1 hadoop
OK
node1:6379> keys *
1) "s1"
node1:6379> get s1
"hadoop"
node1:6379> 
  • 远程工具的使用:参考Windows安装文档
  • 小结
  • 实现Redis的Linux版单机部署
目录
相关文章
|
9月前
|
存储 负载均衡 NoSQL
【赵渝强老师】Redis Cluster分布式集群
Redis Cluster是Redis的分布式存储解决方案,通过哈希槽(slot)实现数据分片,支持水平扩展,具备高可用性和负载均衡能力,适用于大规模数据场景。
647 2
|
运维 NoSQL 测试技术
Redis:内存陡增100%深度复盘
本文深度分析了Redis内存陡增100%的一些细节和解决方案。
602 1
Redis:内存陡增100%深度复盘
|
9月前
|
存储 缓存 NoSQL
【📕分布式锁通关指南 12】源码剖析redisson如何利用Redis数据结构实现Semaphore和CountDownLatch
本文解析 Redisson 如何通过 Redis 实现分布式信号量(RSemaphore)与倒数闩(RCountDownLatch),利用 Lua 脚本与原子操作保障分布式环境下的同步控制,帮助开发者更好地理解其原理与应用。
759 6
|
10月前
|
存储 缓存 NoSQL
Redis核心数据结构与分布式锁实现详解
Redis 是高性能键值数据库,支持多种数据结构,如字符串、列表、集合、哈希、有序集合等,广泛用于缓存、消息队列和实时数据处理。本文详解其核心数据结构及分布式锁实现,帮助开发者提升系统性能与并发控制能力。
|
8月前
|
存储 缓存 NoSQL
工作 10 年!Redis 内存淘汰策略 LRU 和传统 LRU 差异,还傻傻分不清
小富带你深入解析Redis内存淘汰机制:LRU与LFU算法原理、实现方式及核心区别。揭秘Redis为何采用“近似LRU”,LFU如何解决频率老化问题,并结合实际场景教你如何选择合适策略,提升缓存命中率。
1247 3
|
8月前
|
NoSQL Java 调度
分布式锁与分布式锁使用 Redis 和 Spring Boot 进行调度锁(不带 ShedLock)
分布式锁是分布式系统中用于同步多节点访问共享资源的机制,防止并发操作带来的冲突。本文介绍了基于Spring Boot和Redis实现分布式锁的技术方案,涵盖锁的获取与释放、Redis配置、服务调度及多实例运行等内容,通过Docker Compose搭建环境,验证了锁的有效性与互斥特性。
771 0
分布式锁与分布式锁使用 Redis 和 Spring Boot 进行调度锁(不带 ShedLock)
|
8月前
|
缓存 NoSQL 关系型数据库
Redis缓存和分布式锁
Redis 是一种高性能的键值存储系统,广泛用于缓存、消息队列和内存数据库。其典型应用包括缓解关系型数据库压力,通过缓存热点数据提高查询效率,支持高并发访问。此外,Redis 还可用于实现分布式锁,解决分布式系统中的资源竞争问题。文章还探讨了缓存的更新策略、缓存穿透与雪崩的解决方案,以及 Redlock 算法等关键技术。
|
10月前
|
NoSQL Redis
Lua脚本协助Redis分布式锁实现命令的原子性
利用Lua脚本确保Redis操作的原子性是分布式锁安全性的关键所在,可以大幅减少由于网络分区、客户端故障等导致的锁无法正确释放的情况,从而在分布式系统中保证数据操作的安全性和一致性。在将这些概念应用于生产环境前,建议深入理解Redis事务与Lua脚本的工作原理以及分布式锁的可能问题和解决方案。
355 8
|
11月前
|
存储 监控 NoSQL
流量洪峰应对术:Redis持久化策略与内存压测避坑指南
本文深入解析Redis持久化策略与内存优化技巧,涵盖RDB快照机制、AOF重写原理及混合持久化实践。通过实测数据揭示bgsave内存翻倍风险、Hash结构内存节省方案,并提供高并发场景下的主从复制冲突解决策略。结合压测工具链构建与故障恢复演练,总结出生产环境最佳实践清单。
457 9
|
11月前
|
缓存 NoSQL 算法
高并发秒杀系统实战(Redis+Lua分布式锁防超卖与库存扣减优化)
秒杀系统面临瞬时高并发、资源竞争和数据一致性挑战。传统方案如数据库锁或应用层锁存在性能瓶颈或分布式问题,而基于Redis的分布式锁与Lua脚本原子操作成为高效解决方案。通过Redis的`SETNX`实现分布式锁,结合Lua脚本完成库存扣减,确保操作原子性并大幅提升性能(QPS从120提升至8,200)。此外,分段库存策略、多级限流及服务降级机制进一步优化系统稳定性。最佳实践包括分层防控、黄金扣减法则与容灾设计,强调根据业务特性灵活组合技术手段以应对高并发场景。
3184 7

热门文章

最新文章