首页 > 其他分享 >接口幂等性保证

接口幂等性保证

时间:2023-02-24 00:12:28浏览次数:33  
标签:redis 业务 接口 id token version 保证 主键

1、什么是幂等性

接口幂等性就是用户对于同一操作发起一次请求或多次请求的结果是一致的,不会因为多次点击而产生副作用。比如说支付场景,用户购买了商品支付扣款成功,但是返回结果的时候网络异常,此时钱已经扣了,用户再次点击按钮,会进行第二次扣款,返回结果成功,用户查询余额发现多扣钱了,流水记录也变成了两条,这就没有保证接口的幂等性。

2、那些情况需要防止

  • 用户多次点击按钮
  • 用户页面回退再次提交
  • 微服务互相调用,由于网络问题,导致请求失败。feign触发重试机制
  • 其他业务情况

3、什么情况下是幂等

(1)以sql为例,有些操作时天然幂等
select * from table where id =?无论执行多少次都不会改变状态,是天然的幂等
update tab1 set col1 = 1 where col2=2 无论执行成功多少次状态都是一致的,也是幂等操作
delete from user where userid=1 多次操作,结果一样,具备幂等性
insert into user(userid,name)values(1,'a')如userid为唯一主键,即重复操作上面的业务,只会插入一条用户数据,具有幂等性。
(2)不具备幂等性
update tab1 set col1=col1+1 where col2=2 ,每次执行的结果都会发生变化,不是幂等的
insert into user(userid,name)values(1,'a')如userid不是主键,可以重复,那上面业务多次操作,数据都会新增多条,不具备幂等性。

4、幂等解决方案

4.1 token机制

1、服务端提供了发送token的接口,我们在分析业务的时候,那些业务时存在幂等问题的,就必须在执行业务前,先去获取token,服务器会把token保存到redis中。
2、然后调用业务接口请求时,把token携带过去,一般放在请求头。
3、服务器判断token是否存在redis中,存在表示第一次请求,然后删除token,继续执行业务
4、如果判断token不存在redis中,就表示时重复操作,直接返回重复标记给client,这样就保证了业务代码不会被重复执行。
** 注意,危险性 **
1、后端先删除token还是后删除token
(1)先删除可能导致业务确实没有执行,重试还带上之前token,由于防重设计导致,请求还是不能执行
(2)后删除可能导致业务处理成功,但是服务闪断,出现超时,没有删除token,别人继续重试,导致业务被执行两遍
(3)我们最好设计为先删除token,如果业务调用失败,就重新获取token再次请求
2、Token获取、比较和删除必须是原子性
(1)redis.get(token)、token.equals、redis.del(token)如果这两个操作不是原子,可能导致高并发下,都get到同样的数据,判断都成功,继续业务并发执行
(2)可以在redis使用lua脚本完成这样操作

if redis.call('get',KEYS[1])==ARGV[1] then return redis.call('del',KEYS[1]) else return 0 end

大部分使用以上方式

4.2 其他方式

2、各种锁机制
1、数据库悲观锁
select * from xxxx where id = 1 for update;
悲观锁使用时一般伴随事务一起使用,数据锁定时间可能会很长,需要根据实际情况选用。
另外要注意的是,id 字段一定是主键或者唯一索引,不然可能造成锁表的结果,处理起来会
非常麻烦。
2、数据库乐观锁
这种方法适合在更新的场景中,
update t_goods set count = count -1 , version = version + 1 where good_id=2 and version = 1
根据 version 版本,也就是在操作库存前先获取当前商品的 version 版本号,然后操作的时候
带上此 version 号。我们梳理下,我们第一次操作库存时,得到 version 为 1,调用库存服务
version 变成了 2;但返回给订单服务出现了问题,订单服务又一次发起调用库存服务,当订
单服务传如的 version 还是 1,再执行上面的 sql 语句时,就不会执行;因为 version 已经变
为 2 了,where 条件就不成立。这样就保证了不管调用几次,只会真正的处理一次。
乐观锁主要使用于处理读多写少的问题
3、业务层分布式锁
如果多个机器可能在同一时间同时处理相同的数据,比如多台机器定时任务都拿到了相同数
据处理,我们就可以加分布式锁,锁定此数据,处理完成后释放锁。获取到锁的必须先判断
这个数据是否被处理过。
3、各种唯一约束
1、数据库唯一约束
插入数据,应该按照唯一索引进行插入,比如订单号,相同的订单就不可能有两条记录插入。
我们在数据库层面防止重复。
这个机制是利用了数据库的主键唯一约束的特性,解决了在 insert 场景时幂等问题。但主键
的要求不是自增的主键,这样就需要业务生成全局唯一的主键。
如果是分库分表场景下,路由规则要保证相同请求下,落地在同一个数据库和同一表中,要
不然数据库主键约束就不起效果了,因为是不同的数据库和表主键不相关。
2、redis set 防重
很多数据需要处理,只能被处理一次,比如我们可以计算数据的 MD5 将其放入 redis 的 set,
每次处理数据,先看这个 MD5 是否已经存在,存在就不处理。
4、防重表
使用订单号 orderNo 做为去重表的唯一索引,把唯一索引插入去重表,再进行业务操作,且
他们在同一个事务中。这个保证了重复请求时,因为去重表有唯一约束,导致请求失败,避
免了幂等问题。这里要注意的是,去重表和业务表应该在同一库中,这样就保证了在同一个
事务,即使业务操作失败了,也会把去重表的数据回滚。这个很好的保证了数据一致性。
之前说的 redis 防重也算
5、全局请求唯一 id
调用接口时,生成一个唯一 id,redis 将数据保存到集合中(去重),存在即处理过。
可以使用 nginx 设置每一个请求的唯一 id;
proxy_set_header X-Request-Id $request_id;

标签:redis,业务,接口,id,token,version,保证,主键
From: https://www.cnblogs.com/cgy1995/p/17149948.html

相关文章

  • Django DRF接口开发之多表字段数据返回
      关于Serializer序列化数据,一般情况一个实体Model对应一个Serializer,其实功能跟FromModel有点类似。但是在涉及到多表关联查询,序列化数据接口进行返回时,无法返回......
  • 35-DRF框架-生成接口文档
    #注意:只能是ApiView及子应用#1.安装coreapi库#2.主应用中配置路径url(r'^docs/',include_docs_urls(title='接口文档'))#3.主应用中settings.py配置......
  • 删除Azure 虚拟机网络接口
    如果网络接口未附加到虚拟机,即可删除此接口。如果已将网络接口连接到虚拟机,必须先将虚拟机置于停止(解除分配)状态,然后才能将网络接口从虚拟机中拆离。若要从虚拟机中分离网......
  • 49.接口的定义
    1.抽象基类和纯虚函数在设计时,常常希望基类仅仅作为其派生类的一个接口。这就是说,仅想对基类进行向上类型转换,使用它的接口,而不希望用户实际的创建一个基类的对象。同......
  • 抽象类和接口
    抽象类代表一个抽象概念的类;规定整个类家族都必须具备的属性和行为。一、抽象类性质类名前加修饰符abstract;可包含常规类能包含的任何成员,包括非抽象方法;也可包含......
  • RESETful API接口设计规范
    开发工作中,我们有时需要提供API接口给客户端或者第三方使用,那么如何构建一个能让使用者快速理解的API是一项重要的工作。如何我们在设计API时就严格遵守一些规范,那么在后面......
  • Java集合Set接口详解——含源码分析
    前言前几天我们看了​​Java集合List接口详解——含源码分析​​,今天我们看一个数据一个数据存储的另一个接口——Set。Set前面我们说List最大的特点是:​​有序,不唯一​​,而......
  • lazada商品详情数据接口采集代码展示
    业务背景 在很多行业,比如商品采集、刊登、直播、数据分析、竞价等行业都需要用到相关的销量接口,但是官方一般又没有开放这些接口,怎么办?解决方案(点击获取key和secret)目前......
  • ONES 对话 Eolink :数字化企业连接世界的第一接口
    EolinkEolink的创业方向是一次无心插柳。在Eolink创办之前,创始人刘昊臻先后参与了技术外包、在线医疗、O2O电商等创业项目,但是觉得不太符合自己的期望。2015年底......
  • python+playwright 学习-12.Mock 接口返回,模拟各种异常场景
    前言web自动化主要测前端UI的功能,有很多异常的场景,我们很难造真实的场景去触发,比如服务器异常时候,前端的提示语。这时候就可以使用mock功能,模拟接口的返回,测试前端的......