目录
redis介绍，redis linux安装，redis启动，redis经典场景，redis通用命令，数据结构和内部编码，redis字符串类型
昨日内容回顾
# dockerfile 命令
RUN # 构建镜像过程中需要执行的命令 可以有多条
COPY # 复制宿主机文件到容器内
ADD # 复制宿主机文件到容器内 压缩包会自动解压
ENV # 环境变量
EXPOSE # 设置对外暴露的端口
WORKDIR # 工作目录
CMD # 可以用新命令覆盖的 添加使用容器时执行的命令 只有最后一条生效
ENTRYPOINT # 不可以被覆盖
# 容器要运行 必须有一个前台进程
# dockerfile部署图书管理系统项目
FROM python:3.8
MAINTAINER lqz
WORKDIR /soft
COPY ./requirements.txt /soft/requirements.txt
RUN pip install -r requiirements.txt -i https://pypi.doubanio.com/simple
CMD ["python","manage.py","runserver","0.0.0.0:8080"]
# 构建镜像
# 私有仓库
上传到官方仓库
创建仓库
打标签
login
git push
harbor：企业级私有仓库
register：
构建镜像
提交镜像到私有仓库
git push 47.103.74.128:5000/django_books:v1
# docker-compose
单机容器编排：管理单机的多个容器
命令：
up
down
stop
ps
exec
部署flask+redis
容器之间根据容器名就可以通信
Dockerfile
FROM python:3.8
WORKDIR /app
COPY . /app
RUN pip install flask redis -i https://pypi.tuna.tsinghua.edu.cn/simple
EXPOSE 5000
CMD [ "python", "app.py" ]
创建完毕会有一个docker-compose.yml文件
部署路飞项目
后端写一个Dockerfile 构建镜像
mysql redis nginx 基于官方的
nginx：代理前端 请求转发---> 自己的配置文件
redis：目录映射 数据放到宿主机 配置文件是宿主机的
mysql：创建用户 创建库
docker-compose up -d
数据库导入 部署完成
今日内容
1 redis介绍
# 特性 Redis特性(8个)
# 速度快：10w ops(每秒10w读写) 数据存在内存中 c语言实现 单线程模型
# 持久化：rdb和aof
# 多种数据结构：
5大数据结构
BitMaps位图：布隆过滤器 本质是 字符串
HyperLogLog：超小内存唯一值计数 12kb HyperLogLog 本质是 字符串
GEO：地理信息定位 本质是有序集合
# 支持多种编程语言：基于tcp通信协议 各大编程语言都支持
# 功能丰富：发布订阅(消息) Lua脚本 事务(pipeline)
# 简单：源代码几万行 不依赖外部库
# 主从复制：主服务器和从服务器 主服务器可以同步到从服务器中
# 高可用和分布式：
2.8版本以后使用redis-sentinel支持高可用
3.0版本以后支持分布式
2 redis linux下安装
# 1 下载(源代码 c)
wget http://download.redis.io/releases/redis-6.2.9.tar.gz
# 2 解压
tar -xzf redis-6.2.9.tar.gz
# 3 建立软链接
ln -s redis-6.2.9 redis
# 4 cd到redis(软链接到解压文件中)并编译
cd redis
make&&make install
# 5 在src目录下可以看到
# redis-server---> redis服务器
# redis-cli---> redis命令行客户端
# redis-benchmark---> redis性能测试工具
# redis-check-aof---> aof文件修复工具
# redis-check-rdb---> rdb文件检查工具
# redis-sentinel---> sentinel服务器 哨兵
# redis作者对windows维护不好 windows自己有安装包
# 卸载redis
# 1 查看redis进程
ps aux|grep redis
# 2 kill掉进程
kill 进程id
# 3 进入得到redis目录
cd /usr/local/
# 4 删除redis对应的文件
rm -f /usr/local/redis/bin/redis*
rm -f /usr/local/bin/redis*
# 5 删除对应的文件
rm -rf redis
3 redis启动方式
3.1 最简启动
#最简启动
redis-server
ps -ef|grep redis #查看进程
# yum install net-tools -y
netstat -antpl|grep redis #查看端口
redis-cli -h ip -p port ping #命令查看
3.2 动态参数启动
# 动态参数启动
redis-server --port 6380 # 启动 监听6380端口
3.3 配置文件启动
# 默认配置文件：redis.conf
# 配置文件启动(6379对应手机按键MERZ 意大利女歌手Alessia Merz的名字)
# 通过redis-cli连接 输入config get * 可以获取默认配置
./src/redis-cli
# 在redis目录下创建config目录---> 先创建原来的redis.conf的备份，再创建新的redis.conf 然后写入
daemonize yes
pidfile /var/run/redis.pid
port 6379
dir "/root/redis/data"
logfile 6379.log
# 运行redis需要创建data文件夹
mkdir data
# 启动
redis-server redis.conf
3.4 客户端连接命令
redis-cli -h 地址 -p 端口
redis-cli -h 127.0.0.1 -p 6379 info # 直接返回redis的运行信息---> redis监控平台
CONFIG GET * # 获取redis的配置信息
# 296 对配置文件，只需要关注咱们讲过的即可 dir，port，daemonize
#requirepass 设置的密码是什么，如果是空，没有密码
# 直接修改redis的配置信息，修改后同步到硬盘，永久生效
CONFIG SET requirepass 123456 # 密码设置上了
CONFIG REWRITE # 写到硬盘上了
# 下次再连接，必须使用如下两种方式
-方式一：直接连接，指定密码：redis-cli -a 123456
-方式二：先连接进去redis-cli，再执行r auth 密码
# 注意redis的配置文件：
# bind 127.0.0.1 0.0.0.0
# port 端口
# requirepass 密码
# dir 工作目录
# logfile 日志文件
# daemonize 是否以守护进程运行
# pidfile 放的是进程id号
# maxmemory 可以使用的最大内存
# databases 有多少个库
# dbfilename rdb的持久化方案的存储文件dump.rdb
4 redis经典场景
# 缓存系统(缓存数据库)：使用最广泛的就是缓存
# 计数器：网站访问量 转发量 评论数(文章转发 商品销量 单线程模型 不会出现并发问题)
# 消息队列：发布订阅 阻塞队列实现(简单的分布式 blpop：阻塞队列 生产者消费者) celery的消息队列
# 排行榜：有序集合(阅读排行 点赞排行 推荐(销量高的 推荐))
# 社交网络：很多特效跟社交网络匹配 粉丝数 关注数 简单的推荐
# 实时系统：垃圾邮件处理系统 黑白名单系统
# 地理位置信息：附近的人
5 redis通用命令
# 算法性能衡量标准：大O表示法
时间：运行算法的实际 o(1) 0(log n)半次循环 o(n)一次循环 o(n方)两次循环
空间：运行算法占用的内存 o(1) o(log n) o(n) o(n方)
### 1 keys
# 打印出所有key
keys *
# 打印出所有以he开头的key
keys he*
# 打印出所有以he开头 第三个字母是h到1的范围
keys he[h-1]
# 三位长度 以he开头，？表示任意一位
keys he？
# keys命令一般不在生产环境中使用 生产环境key很多 时间复杂度为o(n) 用scan命令
### 2 dbsize 计算key的总数
dbsize # redis内置了计数器 插入删除值该计数器会更改 所以可以在生产环境使用 时间复杂度是o(1)
### 3 exists key 时间复杂度o(1)
# 设置a
set a b
# 查看a是否存在
exists a
(integer) 1
# 存在返回1 不存在返回0
### 4 del key 时间复杂度o(1)
删除成功返回1 key不存在返回0
### 5 expire key seconds 时间复杂度o(1)
expire name 3 # 3s过期
ttl name # 查看name还有多长时间过期
persist name # 去掉name的过期时间 保存下来
### 6 type key 时间复杂度o(1)
type name # 查看name类型 返回string
### 7 其他
info命令 # 内存 cpu 主从相关---> 这个命令返回396个
client list # 正在连接的会话
client kill # ip:端口
dbsize # 总共有多少个key
flushall # 清空所有
flushdb # 只清空当前库
select 数字 # 选择某个库 总共16个库
monitor # 记录操作日志 夯住
6 数据结构和内部编码
# redis的跳跃表
他是redis的有序集合类型的底层实现
# 单线程为什么这么快
1 纯内存
2 非阻塞IO(epoll) 自身实现了事件处理 不在网络io上浪费过多时间
3 避免线程间切换和竟态消耗
7 redis字符串类型
# 字符串key value不能大于512m 一般建议100k以内
### 1 基本使用get set del
get name # 时间复杂度o(1)
set name lqz # 时间复杂度o(1)
del name # 时间复杂度o(1)
### 2 其他使用incr decr incrby decrby
incr age # 对age这个key的value值自增1
decr age # 对age这个key的value值自减1
incrby age 10 # 对age这个key的value值增加10
decrby age 10 # 对age这个key的value值减少10
# 统计网站访问量(单线程无竞争 天然适合做计数器)
# 缓存mysql的信息(json格式)
# 分布式id生成(多个机器同时并发着生成 不会重复)
### 3 set setnx setxx
set name lqz # 不管key是否存在 都设置
setnx name lqz # 可以不存在才设置(新增操作)
set name lqz nx # 同上
set name lqz xx # key存在才设置(更新操作)
### 4 mget mset
mget key1 key2 key3 # 批量获取key1 key2...时间复杂度o(n)
mset key1 value1 key2 value2 key3 value3 # 批量设置时间复杂度o(n)
# n次get和mget的区别
# n次get时间=n次命令时间+n次网络时间
# mget时间=1次网络时间+n次命令时间
### 5 其他：getset append strlen
getset name lqznb # 设置新值并返回旧值 时间复杂度o(1)
append name 666 # 将value追加(拼接)到旧的value 时间复杂度o(1)
strlen name # 计算字符串长度(注意中文) 时间复杂度o(1)
### 6 其他：incrybyfloat getrange setrange
increbyfloat age 3.5 # 为age自增3.5 传负值表示自减 时间复杂度o(1)
getrange key start end # 获取字符串制定下标所有的值 时间复杂度o(1)
setrange key index value # 从指定index开始设置value值 时间复杂度o(1)
补充
# 1 什么是IPC，进程间通信方式有哪些
进程间通信(IPC)：是指在不同进程之间传播或交换信息
IPC的方式通常有管道(包括无名管道和命名管道)，消息队列，信号量，共享存储，Socket，Streams等。其中Socket和Streams支持不同主机上的两个进程IPC
# 2 什么是正向代理，什么是反向代理
正向代理是代理用户客户端 为客户端发送请求 对服务器隐藏自己的真实客户端
反向代理是指以代理服务器来接收客户端的请求 然后将请求转发给内部网络上的服务器 将从服务器上得到的结果返回给客户端
# 用途：
正向代理：突破访问限制：通过代理服务器 可以突破自身ip访问限制 访问国外网站；提高访问速度；提高客户端的安全性和性能
反向代理：负载均衡：根据服务器的负载情况 将客户端请求分发到不同的真实服务器上 从而避免过载；提高访问速度；防止被攻击；缓存；ssl加密
# 3 什么是粘包，如何解决
服务器连续执行三次recv 客户端连续执行三次send
服务端一次性接收到了客户端三次的消息 该现象称为'黏包'
黏包产生的原因：
1 不知道每次的数据到底有多大
2 TCP也称为流水协议：数据像水流一样绵绵不绝没有间隔(TCP会针对数据量较小且发送间隔较短的多条数据一次性合并打包发送)
黏包如何解决：
客户端：
1 制作真实数据的信息字典(数据长度 数据简介 数据名称)
2 利用struct模块制作字典的报头
3 发送固定长度的报头(解析出来是字典的长度)
4 发送字典数据
5 发送真实数据
服务端：
1 接收固定长度的字典报头
2 解析出字典的长度并接收
3 通过字典获取到真实数据的各项信息
4 接收真实数据长度