Rails Rails 中乐观锁与悲观锁的使用

zamia · 2016年02月06日 · 最后由 lanzhiheng 回复于 2021年03月03日 · 22027 次阅读
本帖已被管理员设置为精华贴

简介

只有有资源的争用就少不了使用各种锁,包括关系数据库中使用的悲观锁和乐观锁,分布式系统中的分布式锁(比如使用 zoo keeper 或者 redis 等实现),MRI ruby 中也存在 GIL(global intepreter lock),mongodb 中也存在全局锁、database-level 锁和 collection-level 锁等等。

本文主要讲我们日常开发中很大可能会用到的两种锁:

  • 悲观锁。悲观锁采用相对保守的策略,在资源争用比较严重的时候比较合适。悲观锁在事务开始之前就去尝试获得写权限,事务结束后释放锁;也就是说对于同一行记录,只有一个写事务可以并行;
  • 乐观锁。乐观锁是在提交事务之前,大家可以各自修改数据,但是在提交事务的时候,如果发现在这个过程中,数据发生了改变,那么直接拒绝此次事务提交。乐观锁适合在资源争用不激烈的时候使用。

Rails 提供了很好用的 API 来帮助开发者分别去使用这两种锁,写起来很简单(写完之后我都怀疑写这篇文章是否有必要了,大家随意看看),不过对于一些新手同学可能有帮助。

悲观锁

常用场景

一般对于资源的争用都可以使用悲观锁,比如电商系统中涉及到订单的部分,比如用户支付完成后可能会同时有多条支付成功的通知(做过支付的都知道一般有同步通知和异步通知),比如订单改价的同时可能用户正在支付等等,对于这种会对订单状态发生改变的操作,我们内部一般对这种操作都做加锁处理。

使用

rails 的 API 文档中有详细的说明:

# select * from accounts where id=1 for update
Account.lock.find(1)
# 注意,这种最终会导致一个行锁

# select * from accounts where name = 'shugo' limit 1 for update
Account.where("name = 'shugo'").lock(true).first
# 注意,这里可不是行锁,这里会是一个表锁

注意上面的区别,mysql innodb 里面,对于 "select * from where xxx for update" 的情况,是会锁住整张表的,所以最好不要这样来用。Rails 也提供了一个很方便的方法 with_lock 来锁住单个记录,并且内嵌在事务之中。下面代码中的两段是等价的:


account = Account.find(1)
Account.transaction do
    account.lock!
    account.balance -= 100
    account.save! 
end

# 和下面是等价的

account.with_lock do
    account.balance -= 100
    account.save!
end

乐观锁

常用场景

悲观锁出错概率小,因为一旦获得锁,其他进程会堵塞,但是也导致速度会受影响,系统开销比较大,不利于并发。乐观锁适用于资源竞争不是那么多的地方,这样系统的开销较小,速度也比较快。

乐观锁本质上算是一个利用多版本管理来控制并发的技术,如果事务提交之后,数据库发现写入进程传入的版本号与目前数据库中的版本号不一致,说明有其他人已经修改过数据,不再允许本事务的提交。所以,使用乐观锁之前需要给数据库增加一列 :lock_version,Rails 会自动识别这一列,像数据库提交数据的时候自动带上。另外,乐观锁是默认打开的,如果要关闭,需要配置一下。

在大鱼系统中,库存管理是使用乐观锁的,我们的流量没那么大,不太可能多个用户同时预订同一个住宿的同一个间夜,概率比较小,所以目前是使用乐观锁来实现的。如果抛异常,那么还可以进行重试。

使用

记得使用前添加 lock_version 的字段给相应的表,其他的就是自动的了,如果事务提交失败,那么 Rails 会抛一个 ActiveRecord::StaleObjectError 的异常。

比如,下面这段代码会进行重试:

retry_times = 3

begin
    @order.with_lock do
        @order.set_paid!
    end
rescue ActiveRecord::StaleObjectError => e
    retry_times -= 1
    if retry_times > 0
        retry
    else
        raise e
    end
rescue => e
    raise e
end

需要注意的地方

  1. 一般,使用锁的时候和事务同时使用,所以 with_lock 是用的比较多的,而且尽量使用行锁而不是表锁。
  2. 另外,也注意异常的处理,需要使用那些会抛异常的方法;
  3. 对于乐观锁,还需要注意如果是前端操作频繁,那么还需要把 lock_version 写入到 form 表单中,否则起不到锁的作用,这里讲的很详细了

以上~ (发现这篇没什么内容,不过我记得最初大家写的时候也经常犯错,算是一个总结吧)

参考

  1. http://railscasts.com/episodes/59-optimistic-locking-revised
  2. https://blog.engineyard.com/2011/a-guide-to-optimistic-locking
  3. http://api.rubyonrails.org/classes/ActiveRecord/Locking/Optimistic.html

好文,一直没搞懂两者的区别,现在终于明白了

#2 楼 @xiaoronglv 赞,感谢补充,写的确实不严谨,我也去学习下

换 Postgres 吧,基本可以事务搞定,极少需要手动管理锁的。

#4 楼 @luikore 锁跟事务是两件事,事务是为了保证操作的原子性,锁是用来做并发控制。Postgres 同样需要锁~

有个疑问想请教,对于高并发的场景,是使用悲观锁好还是乐观锁呢?

有个疑问想请教,对于高并发的场景,是使用悲观锁好还是乐观锁呢?

#7 楼 @pathbox 高并发的情况下,使用悲观锁会造成一部分关联 sql 执行非常之慢,慎用...

#8 楼 @jackxu 所以,选乐观锁是比较合适的

#9 楼 @pathbox 还是看具体的业务场景吧。乐观锁在竞争较少的情况用比较合适,而且需要自己处理冲突的情况。悲观锁会堵塞其他进程,不利于并发,但是程序写起来容易

#5 楼 @zamia 呃,我哪里说锁和事务是一回事了?你大概没用过 postgres 吧,你讲的大约是十几年前的书里强调的...

#12 楼 @luikore 说的确实是一些基础的东西~~ 我的意思是用任何数据库跟使用锁是不冲突。如果你熟悉 postgres,可以大概讲讲它是如何解决这类问题的,让大家了解一下~

#9 楼 @pathbox 高并发情况,比如商品抢购,同一时间可能会产生多条订单去修改商品的库存,这时候使用乐观锁会导致出现大量 StaleObjectError 异常,这种情况可以考虑引入 redis 来管理库存。

#15 楼 @EricZhu 嗯。redis 操作是原子性的,也许会有一些时间的延迟,不过可以优化到用户可以接受的范围。

#16 楼 @pathbox redis 的响应速度很快了,几乎没有延迟。redis 原子操作可以直接做加一减一操作,库存管理特别合适

锁在移动 API 中用的特别多,尤其是用户积分变动比较频繁,加分,消耗积分等等。文章写得很好。加上那个锁行,锁表的补充就 perfect 了。

乐观锁可以重试多次,但还是有可能失败。如果用在用户交互时倒没关系,看到了再提交一次。其他的情况,总会不淡定。 另外,乐观锁带 retry 的代码明显繁琐多了。对 #14 楼 @luikore 讲的 MVCC 有兴趣。

写的很好。文中说的大鱼系统的库存管理,或许用数据库 Check 约束更好。如果用 Rails 乐观锁,库存充足的情况下,当有用户下单,但由于有并发,其他用户更新了库存,此时这位用户就会失败。如果用 Check 约束似乎不会有这个问题。实际也是利用了 14 楼说的“PG 的 MVCC”。

附: Rails 乐观锁与悲观锁官方文档 Rails 悲观锁使用

好文,正好要写涉及一些并发的代码

24 楼 已删除

@luikore 经测试 Rails5.0.1,Postgresql9.6.2

Variant.transaction do
      v1 = Variant.find 1
      v2 = Variant.find 1

      v1.unit_price = Money.new(2000)
      v1.save

      v2.unit_price = Money.new(3000)
      v2.save
    end

unit_price 等于 Money.new(2000)

只有 update 的时候会出现 dirty read,此时可以设置隔离级别,或者手动加锁

nainc 关于乐观锁的重试 提及了此话题。 12月19日 10:28
liukun_lk 如何测试并发情况 提及了此话题。 01月18日 21:43
flydragon 乐观锁这次应该说清楚了吧 提及了此话题。 05月11日 09:46
@order.with_lock do
    @order.set_paid!
end

我理解这里也用了悲观锁了吧?如果单纯是用乐观锁的话是不是with_lock可以去掉?直接

@order.set_paid!
lanzhiheng 事务与锁在 Rails 中的体现 提及了此话题。 03月05日 07:23
需要 登录 后方可回复, 如果你还没有账号请 注册新账号