我的 Rails 应用程序出现问题，一些随机查询需要大约 5 秒或更长时间才能完成。大多数时候，查询非常简单(select * from x where id = ?)，而且字段甚至也被编入索引。

这里有一些关于设置的更多信息:

• 反向 nginx 代理背后的 Puma 3.5.0
  • 4 个 worker ，每个 worker 最少 4 个，最多 8 个线程。
• Ruby v2.2.3，Rails v4.2.4
• PostgreSQL 9.4 数据库
  • 线程池设置为最多 60 个连接
• 监控应用
• 8GB RAM、4 个 CPU、SSD。

我在查看 Appsignal 中的查询性能时发现了这一点。我注意到大多数查询在几毫秒内完成，然后时不时地，仍然在同一个请求中，有多个查询需要 5 秒以上才能完成。奇怪的是，它总是需要 5,.. 秒。 这是实际操作的图片:

我尝试过的事情:

• 增加线程池以确保 puma 工作线程有足够的连接对象。
• 将“reaping_frequency”设置为 10 秒，以确保没有使用死连接。
• 增加 puma workers/threads

我在应用程序中注意到这一点，因为有些页面需要很长时间才能加载(我有一个函数调用大约需要 1 分钟才能完成)并且不知何故这会阻止新请求。这对我来说很奇怪，因为有 4 个工作人员，每个工作人员有 8 个线程 = 32 个线程可以处理其他请求。

我对上图中的查询进行了解释，这是输出:

Limit  (cost=0.28..8.30 rows=1 width=150)
  ->  Index Scan using index_addresses_on_addressable_id_and_addressable_type on addresses  (cost=0.28..8.30 rows=1 width=150)
        Index Cond: ((addressable_id = 1) AND ((addressable_type)::text = 'University'::text))
        Filter: (deleted_at IS NULL)
Total query runtime: 13 ms

这是地址表的架构:

# Table name: addresses
#
#  id               :integer          not null, primary key
#  street           :string
#  zip_code         :string
#  city             :string
#  country          :string
#  addressable_id   :integer
#  addressable_type :string
#  created_at       :datetime         not null
#  updated_at       :datetime         not null
#  street_number    :string
#  latitude         :float
#  longitude        :float
#  mobile           :string
#  phone            :string
#  email            :string
#  deleted_at       :datetime
#  name             :string`

这是我的 Puma 配置文件:

#!/usr/bin/env puma

directory '/home/deployer/apps/qeystate/current'
rackup "/home/deployer/apps/qeystate/current/config.ru"
environment 'staging'   
pidfile "/home/deployer/apps/qeystate/shared/tmp/pids/puma.pid"
state_path "/home/deployer/apps/qeystate/shared/tmp/pids/puma.state"
stdout_redirect '/home/deployer/apps/qeystate/shared/log/puma_access.log', '/home/deployer/apps/qeystate/shared/log/puma_error.log', true
threads 4,8
bind 'unix:///home/deployer/apps/qeystate/shared/tmp/sockets/puma.sock'
workers 4
preload_app!
prune_bundler

on_worker_boot do
  ActiveSupport.on_load(:active_record) do
    ActiveRecord::Base.establish_connection
  end
end

before_fork do
  ActiveRecord::Base.connection_pool.disconnect!
end

最佳答案

我会提出一些建议 - 两种可能的解决方案，一种测试/重现方法，以及一种关于更深入指标的建议。

1) 可能的快速解决方案:分拆 1 分钟的工作，使其成为非阻塞的。看看问题是否由此解决。尝试使用 Redis+Sidekiq，它非常容易启动和运行(或类似的东西)。

2) 第二种可能的解决方案:寻找对 Postgres 进行的任何全表锁或独占行锁 - 看看您是否曾经进行过全表锁，如果是，找到有问题的语句并将其删除。

3) 测试/复制:对于测试，看看您是否可以在生产之外复制这个问题。我会推荐 jmeter 作为一个非常有用的工具来模拟大量请求和不同类型的请求，看看你是否可以在受控/暂存上下文中重现它。一致的复制是解决此类问题的关键。在问题发生前后引用您的生产服务器日志以生成您的 jmeter 测试请求，这有望帮助重现问题。

如果您能想出一种方法来复制它，那么您就可以开始调整模拟，看看删除或增加/减少各种请求是否可以消除问题或以某种方式改变问题。

4) 分析:安装 NewRelic 或类似的分析 gem 以更深入地了解请求进入时发生的情况。您真的想清楚地了解请求是否在 Postgres 中真正被阻止(通过独有的行/表锁阻塞了你的查询)或者你是否被 Puma 执行队列中运行缓慢的查询备份，或者在 Ruby 内部某处有一个不幸的等待状态不知何故。

您还没有足够的信息来解决这个问题，所以您真的想通过收集数据以及对正在发生的事情的假设来开始探索解决方案。

我对这类问题的一般策略是(按顺序):

• 尝试一些快速/简单/安全的修复(盲目)，看看是否有任何问题得到解决/改变。
• 尝试在非生产环境中进行复制(真的，真的尝试让它发挥作用)。
• 对系统进行检测以收集数据，看看您可以从问题和任何相关方面了解到什么。

关于ruby-on-rails - Rails 查询执行导致数据库峰值，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/38742773/