技术是为了解决问题而生的,锁被用来实现隔离性,保证并发事务的正确性。
两段锁
数据库遵循的是两段锁协议,将事务分成两个阶段,加锁阶段和解锁阶段(所以叫两段锁)
加锁阶段:在加锁阶段只能进行加锁操作。
解锁阶段:在解锁阶段只能进行解锁操作。
事务要读取对象 ,必须先获得共享锁,这样防止幻读。事务要修改对象,必须先获得独占锁,这样防止脏写。
两段锁可以这样来实现:事务开始后就处于加锁阶段,一直到执行 rollback 或 commit 之前都是加锁阶段。rollback 和 commit 使事务进入解锁阶段,即在 rollback 或 commit 时释放持有的锁。
一次封锁
一次封锁法遵守两段锁协议。
一次封锁要求每个事务必须一次将所有要使用的数据全部加锁,否则就不能继续执行。
一次封锁存在的问题:
一次封锁的好处:不会出现死锁。
为什么要使用两段锁呢?用完直接释放锁不行吗?
不行,用完直接释放会使事务的隔离性受到影响。具体介绍可以看下面的文章。Mysql锁:灵魂七拷问 (youzan.com)
两段锁的优点 / 作用:
两段锁的缺点:
数据库系统会自动检测死锁情况,并强行中止其中的一个事务以打破僵局
由于使用了这么多的锁机制,所以很容易出现死锁现象 ,例如事务 A 可能在等待事务 B 释放它持有的锁, 而事务 B 在等待事务 A 释放它持有的锁。数据库系统会自动检测事务之间的死锁情况,并强行中止其中的一个事务以打破僵局,这样另一个可以继续向前执行 。而被中止的事务需要由应用层来重试。
根据加锁的范围,MySQL 里面的锁大致可以分成全局锁、表级锁和行级锁三类。
全局锁就是对整个数据库实例加锁。
给数据库实例加全局锁的命令:flush tables with read lock;(FTWRL)
释放锁的命令:unlock tables;(表级锁、行级锁释放也是这个命令)
加上全局锁之后,整个数据库处于只读状态,其他线程的以下语句会被阻塞:
全局锁的典型使用场景是,做全库逻辑备份。也就是把整库每个表存成 .sql 类型的文件。
全局锁的作用相当于是停止更新操作,拿到一个一致性视图。
MySQL 的在可重复读隔离级别下开启一个事务也可以拿到一个一致性视图,并且后者可以做到不影响更新操作。
官方自带了全量逻辑备份工具 mysqldump。
表级锁就是对表加锁。
MySQL 里面表级别的锁有三种:
表锁就是对整个数据表加锁。
给数据表加表锁的命令:lock table 表名 read / write;
释放表锁的命令和释放全局锁的命令一样,都是:unlock tables;。如果不手动释放表锁,在客户端断开的时候会自动释放表锁。
需要注意的是,lock tables 语法除了会限制别的线程的读写外,也限定了本线程接下来的操作对象。
举个例子,如果在线程 A 中执行 lock tables t1 read, t2 write; 这个语句,则其他线程写 t1、读写 t2 的语句都会被阻塞。同时,线程 A 在执行 unlock tables 之前,也只能执行读 t1、读写 t2 的操作。连写 t1 都不允许,自然也不能访问其他表。
表锁分为:共享锁、独占锁。
那么我们该如何来判断表中是否有记录被加独占锁 / 独占锁呢?我们可以通过遍历所有记录的方式来查看表中有没有被加锁的记录,而遍历的方式太慢了。
意向锁的提出就是为了加表级别的共享锁 和 独占锁时,快速判断表中的记录是否被上锁,以避免用遍历的方式来查看表中有没有被加锁的记录,提供判断速度。
意向锁分为:意向共享锁、意向独占锁:
这样,如果表级别存在 意向共享锁,就意味着表中有被加 共享锁 的记录;如果表级别存在 意向独占锁,就意味着表中有被加 独占锁 的记录。通过意向锁我们就可以快速判断表中是否有记录被加锁。
表锁和意向锁的兼容互斥关系
意向共享锁、意向独占锁是兼容的。表锁和意向锁的兼容互斥关系如下:
| 锁的类型 | 意向共享锁 | 意向独占锁 |
|---|---|---|
| 表共享锁 | ✔️ | ❌ |
| 表独占锁 | ❌ | ❌ |
元数据锁(meta data lock,MDL)是 MySQL 5.5 版本引入的。
MDL 不需要显式使用,在访问一个表的时候会被自动加 MDL 锁。
MDL 锁分为:MDL 读锁、MDL 写锁:
MDL 锁的加锁、释放锁的规则:
MDL 锁作用是:防止 DDL 操作和 DML 操作并发,保证变更表结构操作的安全性。
需要注意的是,如果申请加 MDL 锁失败,那么再此之后的加锁申请都必须等待(公平锁机制,遵循先来先执行原则,先来的没有加锁成功,后来的不能加锁)。因此执行 DDL 操作时要格外注意,如果操作执行时间过长,后面的 DML 操作都将被阻塞较长时间。
行级锁就是对记录加锁。
行级锁又分为各种类型,不同类型的行级锁的作用也不同,行级锁分为:
InnoDB 存储引擎的行级锁是通过给索引上的索引项加锁来实现的,因此如果一条 SQL 语句没有走索引,那么不会使用行级锁的,会使用表锁。
行级锁的缺点是:由于需要请求大量的锁资源,所以速度慢,内存消耗大。
A gap lock is a lock on a gap between index records, or a lock on the gap before the first or after the last index record. For example, SELECT c1 FROM t WHERE c1 BETWEEN 10 and 20 FOR UPDATE; prevents other transactions from inserting a value of 15 into column t.c1, whether or not there was already any such value in the column, because the gaps between all existing values in the range are locked.
只在可重复读或以上隔离级别下的特定操作才会加间隙锁。在 加读写锁的 select、update 和 delete 时,除了基于唯一索引(主键索引也属于唯一索引)的查询之外,基于其他索引查询时都会加间隙锁。
加锁规则:包含了两个“原则”、两个“优化”和一个“bug”。
表锁、元数据锁、行锁又都分为共享锁和独占锁。
共享锁 和 独占锁 的兼容互斥关系如下:
| 锁的类型 | 共享锁 | 独占锁 |
|---|---|---|
| 共享锁 | ✔️ | ❌ |
| 独占锁 | ❌ | ❌ |
为什么要分 共享锁、独占锁:允许多个事务并发读,但只允许一个事务写,既支持并发提高性能,又保证了并发安全。
06 | 全局锁和表锁 :给表加个字段怎么有这么多阻碍? (geekbang.org)
07 | 行锁功过:怎么减少行锁对性能的影响? (geekbang.org)
21 | 为什么我只改一行的语句,锁这么多? (geekbang.org)
《数据密集型应用系统设计》第七章:事务
《MySQL 是怎样运行的:从根儿上理解 MySQL》第25章 工作面试老大难-锁
总的来说,我对ruby还比较陌生,我正在为我正在创建的对象编写一些rspec测试用例。许多测试用例都非常基础,我只是想确保正确填充和返回值。我想知道是否有办法使用循环结构来执行此操作。不必为我要测试的每个方法都设置一个assertEquals。例如:describeitem,"TestingtheItem"doit"willhaveanullvaluetostart"doitem=Item.new#HereIcoulddotheitem.name.shouldbe_nil#thenIcoulddoitem.category.shouldbe_nilendend但我想要一些方法来使用
我试图在一个项目中使用rake,如果我把所有东西都放到Rakefile中,它会很大并且很难读取/找到东西,所以我试着将每个命名空间放在lib/rake中它自己的文件中,我添加了这个到我的rake文件的顶部:Dir['#{File.dirname(__FILE__)}/lib/rake/*.rake'].map{|f|requiref}它加载文件没问题,但没有任务。我现在只有一个.rake文件作为测试,名为“servers.rake”,它看起来像这样:namespace:serverdotask:testdoputs"test"endend所以当我运行rakeserver:testid时
作为我的Rails应用程序的一部分,我编写了一个小导入程序,它从我们的LDAP系统中吸取数据并将其塞入一个用户表中。不幸的是,与LDAP相关的代码在遍历我们的32K用户时泄漏了大量内存,我一直无法弄清楚如何解决这个问题。这个问题似乎在某种程度上与LDAP库有关,因为当我删除对LDAP内容的调用时,内存使用情况会很好地稳定下来。此外,不断增加的对象是Net::BER::BerIdentifiedString和Net::BER::BerIdentifiedArray,它们都是LDAP库的一部分。当我运行导入时,内存使用量最终达到超过1GB的峰值。如果问题存在,我需要找到一些方法来更正我的代
Rails2.3可以选择随时使用RouteSet#add_configuration_file添加更多路由。是否可以在Rails3项目中做同样的事情? 最佳答案 在config/application.rb中:config.paths.config.routes在Rails3.2(也可能是Rails3.1)中,使用:config.paths["config/routes"] 关于ruby-on-rails-Rails3中的多个路由文件,我们在StackOverflow上找到一个类似的问题
我需要从一个View访问多个模型。以前,我的links_controller仅用于提供以不同方式排序的链接资源。现在我想包括一个部分(我假设)显示按分数排序的顶级用户(@users=User.all.sort_by(&:score))我知道我可以将此代码插入每个链接操作并从View访问它,但这似乎不是“ruby方式”,我将需要在不久的将来访问更多模型。这可能会变得很脏,是否有针对这种情况的任何技术?注意事项:我认为我的应用程序正朝着单一格式和动态页面内容的方向发展,本质上是一个典型的网络应用程序。我知道before_filter但考虑到我希望应用程序进入的方向,这似乎很麻烦。最终从任何
我在我的项目中添加了一个系统来重置用户密码并通过电子邮件将密码发送给他,以防他忘记密码。昨天它运行良好(当我实现它时)。当我今天尝试启动服务器时,出现以下错误。=>BootingWEBrick=>Rails3.2.1applicationstartingindevelopmentonhttp://0.0.0.0:3000=>Callwith-dtodetach=>Ctrl-CtoshutdownserverExiting/Users/vinayshenoy/.rvm/gems/ruby-1.9.3-p0/gems/actionmailer-3.2.1/lib/action_mailer
刚入门rails,开始慢慢理解。有人可以解释或给我一些关于在application_controller中编码的好处或时间和原因的想法吗?有哪些用例。您如何为Rails应用程序使用应用程序Controller?我不想在那里放太多代码,因为据我了解,每个请求都会调用此Controller。这是真的? 最佳答案 ApplicationController实际上是您应用程序中的每个其他Controller都将从中继承的类(尽管这不是强制性的)。我同意不要用太多代码弄乱它并保持干净整洁的态度,尽管在某些情况下ApplicationContr
我想向我的Controller传递一个参数,它是一个简单的复选框,但我不知道如何在模型的form_for中引入它,这是我的观点:{:id=>'go_finance'}do|f|%>Transferirde:para:Entrada:"input",:placeholder=>"Quantofoiganho?"%>Saída:"output",:placeholder=>"Quantofoigasto?"%>Nota:我想做一个额外的复选框,但我该怎么做,模型中没有一个对象,而是一个要检查的对象,以便在Controller中创建一个ifelse,如果没有检查,请帮助我,非常感谢,谢谢
我注意到像bundler这样的项目在每个specfile中执行requirespec_helper我还注意到rspec使用选项--require,它允许您在引导rspec时要求一个文件。您还可以将其添加到.rspec文件中,因此只要您运行不带参数的rspec就会添加它。使用上述方法有什么缺点可以解释为什么像bundler这样的项目选择在每个规范文件中都需要spec_helper吗? 最佳答案 我不在Bundler上工作,所以我不能直接谈论他们的做法。并非所有项目都checkin.rspec文件。原因是这个文件,通常按照当前的惯例,只
我正在使用active_admin,我在Rails3应用程序的应用程序中有一个目录管理,其中包含模型和页面的声明。时不时地我也有一个类,当那个类有一个常量时,就像这样:classFooBAR="bar"end然后,我在每个必须在我的Rails应用程序中重新加载一些代码的请求中收到此警告:/Users/pupeno/helloworld/app/admin/billing.rb:12:warning:alreadyinitializedconstantBAR知道发生了什么以及如何避免这些警告吗? 最佳答案 在纯Ruby中:classA