草庐IT

mysql - 在通用 SQL 中同时检索(选择)或创建(插入)新行而不会发生冲突

coder 2023-10-03 原文

我有一个系统,它有一个复杂的主键用于与外部系统交互,还有一个快速、小的不透明主键供内部使用。例如:外部键可能是一个复合值 - 类似于(给定名称 (varchar)、姓氏 (varchar)、邮政编码 (char)),而内部键可能是一个整数(“客户 ID”)。

当我收到带有外部 key 的传入请求时,我需要查找内部 key - 这是棘手的部分 - 如果我还没有给定外部 ID 的内部 key ,则分配一个新的内部 key 。

显然,如果我一次只有一个客户端与数据库对话,这很好。 SELECT customer_id FROM customers WHERE given_name = 'foo' AND ... ,然后 INSERT INTO customers VALUES (...)如果我没有找到值。但是,如果可能同时有许多来自外部系统的请求,并且许多请求可能同时到达一个以前闻所未闻的客户,那么就会出现竞争条件,多个客户端可能会尝试 INSERT新行。

如果我要修改现有行,那会很容易;只是 SELECT FOR UPDATE首先,在执行 UPDATE 之前获取适当的行级锁.但在这种情况下,我没有可以锁定的行,因为该行尚不存在!

到目前为止,我已经提出了几个解决方案,但每个解决方案都有一些非常重要的问题:

  • INSERT 上捕获错误,从顶部重新尝试整个事务。如果交易涉及十几个客户,这是一个问题,特别是如果传入的数据可能每次都以不同的顺序谈论相同的客户。有可能陷入相互递归的死锁循环中,每次冲突都发生在不同的客户身上。您可以通过重试尝试之间的指数等待时间来缓解这种情况,但这是一种处理冲突的缓慢且昂贵的方法。此外,这使应用程序代码相当复杂,因为一切都需要重新启动。
  • 使用保存点。在 SELECT 之前启动一个保存点, 在 INSERT 上捕获错误,然后回滚到保存点和 SELECT再次。保存点不是完全可移植的,它们的语义和功能在数据库之间略有不同;我注意到的最大区别是,有时它们似乎会嵌套,有时它们不会嵌套,所以如果我能避开它们就好了。不过,这只是一个模糊的印象——它不准确吗?保存点是否标准化,或者至少实际上是一致的?此外,保存点使在同一事务上并行执行操作变得困难,因为您可能无法确切知道将回滚多少工作,尽管我意识到我可能只需要忍受它。
  • 获取一些全局锁,例如使用 LOCK 语句 ( oracle mysql postgres ) 的表级锁。这显然会减慢这些操作的速度并导致大量的锁争用,所以我宁愿避免它。
  • 获取更细粒度但特定于数据库的锁。我只熟悉Postgres's way of doing this ,这在其他数据库中绝对不受支持(这些函数甚至以“pg_ ”开头),因此这又是一个可移植性问题。此外,postgres 这样做的方式需要我以某种方式将 key 转换为一对整数,它可能无法完全适应。有没有更好的方法来获取假想对象的锁?

  • 在我看来,这一定是数据库常见的并发问题,但我还没有找到很多关于它的资源;可能只是因为我不知道规范的措辞。在任何标记的数据库中,是否可以使用一些简单的额外语法来做到这一点?

    最佳答案

    我不清楚为什么不能使用 INSERT IGNORE,它可以正常运行并且您可以检查是否发生了插入(修改的记录)。如果插入“失败”,那么您知道该键已经存在并且您可以执行 SELECT。您可以先执行 INSERT,然后执行 SELECT。

    或者,如果您使用 MySQL,请使用支持事务的 InnoDB。这将使回滚更容易。

    关于mysql - 在通用 SQL 中同时检索(选择)或创建(插入)新行而不会发生冲突,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/5227150/

    有关mysql - 在通用 SQL 中同时检索(选择)或创建(插入)新行而不会发生冲突的更多相关文章

    1. ruby - 如何在 Ruby 中顺序创建 PI - 2

      出于纯粹的兴趣,我很好奇如何按顺序创建PI,而不是在过程结果之后生成数字,而是让数字在过程本身生成时显示。如果是这种情况,那么数字可以自行产生,我可以对以前看到的数字实现垃圾收集,从而创建一个无限系列。结果只是在Pi系列之后每秒生成一个数字。这是我通过互联网筛选的结果:这是流行的计算机友好算法,类机器算法:defarccot(x,unity)xpow=unity/xn=1sign=1sum=0loopdoterm=xpow/nbreakifterm==0sum+=sign*(xpow/n)xpow/=x*xn+=2sign=-signendsumenddefcalc_pi(digits

    2. python - 如何使用 Ruby 或 Python 创建一系列高音调和低音调的蜂鸣声? - 2

      关闭。这个问题是opinion-based.它目前不接受答案。想要改进这个问题?更新问题,以便editingthispost可以用事实和引用来回答它.关闭4年前。Improvethisquestion我想在固定时间创建一系列低音和高音调的哔哔声。例如:在150毫秒时发出高音调的蜂鸣声在151毫秒时发出低音调的蜂鸣声200毫秒时发出低音调的蜂鸣声250毫秒的高音调蜂鸣声有没有办法在Ruby或Python中做到这一点?我真的不在乎输出编码是什么(.wav、.mp3、.ogg等等),但我确实想创建一个输出文件。

    3. ruby - 使用 Vim Rails,您可以创建一个新的迁移文件并一次性打开它吗? - 2

      使用带有Rails插件的vim,您可以创建一个迁移文件,然后一次性打开该文件吗?textmate也可以这样吗? 最佳答案 你可以使用rails.vim然后做类似的事情::Rgeneratemigratonadd_foo_to_bar插件将打开迁移生成的文件,这正是您想要的。我不能代表textmate。 关于ruby-使用VimRails,您可以创建一个新的迁移文件并一次性打开它吗?,我们在StackOverflow上找到一个类似的问题: https://sta

    4. ruby-on-rails - 无法使用 Rails 3.2 创建插件? - 2

      我对最新版本的Rails有疑问。我创建了一个新应用程序(railsnewMyProject),但我没有脚本/生成,只有脚本/rails,当我输入ruby./script/railsgeneratepluginmy_plugin"Couldnotfindgeneratorplugin.".你知道如何生成插件模板吗?没有这个命令可以创建插件吗?PS:我正在使用Rails3.2.1和ruby​​1.8.7[universal-darwin11.0] 最佳答案 随着Rails3.2.0的发布,插件生成器已经被移除。查看变更日志here.现在

    5. ruby - Highline 询问方法不会使用同一行 - 2

      设置:狂欢ruby1.9.2高线(1.6.13)描述:我已经相当习惯在其他一些项目中使用highline,但已经有几个月没有使用它了。现在,在Ruby1.9.2上全新安装时,它似乎不允许在同一行回答提示。所以以前我会看到类似的东西:require"highline/import"ask"Whatisyourfavoritecolor?"并得到:Whatisyourfavoritecolor?|现在我看到类似的东西:Whatisyourfavoritecolor?|竖线(|)符号是我的终端光标。知道为什么会发生这种变化吗? 最佳答案

    6. ruby - 如何使用 RSpec::Core::RakeTask 创建 RSpec Rake 任务? - 2

      如何使用RSpec::Core::RakeTask初始化RSpecRake任务?require'rspec/core/rake_task'RSpec::Core::RakeTask.newdo|t|#whatdoIputinhere?endInitialize函数记录在http://rubydoc.info/github/rspec/rspec-core/RSpec/Core/RakeTask#initialize-instance_method没有很好的记录;它只是说:-(RakeTask)initialize(*args,&task_block)AnewinstanceofRake

    7. ruby-on-rails - 项目升级后 Pow 不会更改 ruby​​ 版本 - 2

      我在我的Rails项目中使用Pow和powifygem。现在我尝试升级我的ruby​​版本(从1.9.3到2.0.0,我使用RVM)当我切换ruby​​版本、安装所有gem依赖项时,我通过运行railss并访问localhost:3000确保该应用程序正常运行以前,我通过使用pow访问http://my_app.dev来浏览我的应用程序。升级后,由于错误Bundler::RubyVersionMismatch:YourRubyversionis1.9.3,butyourGemfilespecified2.0.0,此url不起作用我尝试过的:重新创建pow应用程序重启pow服务器更新战俘

    8. ruby-on-rails - 使用 rails 4 设计而不更新用户 - 2

      我将应用程序升级到Rails4,一切正常。我可以登录并转到我的编辑页面。也更新了观点。使用标准View时,用户会更新。但是当我添加例如字段:name时,它​​不会在表单中更新。使用devise3.1.1和gem'protected_attributes'我需要在设备或数据库上运行某种更新命令吗?我也搜索过这个地方,找到了许多不同的解决方案,但没有一个会更新我的用户字段。我没有添加任何自定义字段。 最佳答案 如果您想允许额外的参数,您可以在ApplicationController中使用beforefilter,因为Rails4将参数

    9. ruby - 为什么 SecureRandom.uuid 创建一个唯一的字符串? - 2

      关闭。这个问题需要detailsorclarity.它目前不接受答案。想改进这个问题吗?通过editingthispost添加细节并澄清问题.关闭8年前。Improvethisquestion为什么SecureRandom.uuid创建一个唯一的字符串?SecureRandom.uuid#=>"35cb4e30-54e1-49f9-b5ce-4134799eb2c0"SecureRandom.uuid方法创建的字符串从不重复?

    10. ruby - 有人可以帮助解释类创建的 post_initialize 回调吗 (Sandi Metz) - 2

      我正在阅读SandiMetz的POODR,并且遇到了一个我不太了解的编码原则。这是代码:classBicycleattr_reader:size,:chain,:tire_sizedefinitialize(args={})@size=args[:size]||1@chain=args[:chain]||2@tire_size=args[:tire_size]||3post_initialize(args)endendclassMountainBike此代码将为其各自的属性输出1,2,3,4,5。我不明白的是查找方法。当一辆山地自行车被实例化时,因为它没有自己的initialize方法

    随机推荐