我正在运行一个相当标准的 MongoDB (3.0.5) 副本集，其中包含 1 个主副本和 2 个副副本。我的 PHP 应用程序的读取首选项是主要的，因此不会在辅助设备上进行读取 - 它们仅用于故障转移。我正在我的应用程序上运行负载测试，它每秒创建大约 600 个查询/更新。这些操作都是针对拥有约 500,000 个文档的集合运行的。但是，查询经过索引优化和支持。任何查询最多不会超过 40 毫秒。
我的问题是所有 3 个节点上的 CPU 负载都非常高 (200% - 300%) - 有时辅助节点上的负载甚至高于主节点上的负载。磁盘 IO 和 RAM 使用似乎没问题 - 至少它们没有达到任何限制。
主服务器的日志文件包含大量 getmore oplog 查询 - 我猜对主服务器的任何操作都会创建一个 oplog 查询。在我看来，这是太多的复制开销，但我之前没有任何在负载下使用 MongoDB 的经验，也没有任何关键数据。
由于设置将不得不在生产中承受更多的负载，我的问题是复制开销是否在预期范围内以及 CPU 负载升高到那么高是否正常，即使在辅助节点上也是如此，或者我是否有什么问题？我不见了？
最佳答案
这样想。无论数据更改操作发生在主服务器上，它也需要发生在每个辅助服务器上。如果有很多这样的操作，并且它们在主节点上产生高 CPU 负载，那么同样的情况将在辅助节点上重复出现。
当然，在您的情况下，您希望主服务器的 CPU 压力更大，因为除了写入之外，它还处理所有读取。可能，在您的场景中，读取相对较少，与写入量相比，读取次数并不多。这可以解释为什么主节点上的负载与辅助节点上的负载大致相同。
my question is whether the replication overhead is to be expected
你所谓的复制开销，我认为是复制的本质。写入压力大的主节点会导致所有次级节点也受到写入压力。
and whether it's normal that the CPU load goes up that high, even on the secondaries
您每秒有 600 个写入查询并且您的 RAM 和磁盘没有压力，对我来说这意味着您已经正确设置了索引。每秒这种写入操作量预计会有高 CPU 负载，因为索引正在被密集使用。
请记住，一旦你收集了更多的数据，索引和内存映射数据可能不再适合内存，然后 RAM 和磁盘都会有压力，而 CPU 不太可能在高加载了。在这种情况下，您可能想要添加更多 RAM 或查看 sharding .
关于MongoDB 副本集 CPU 负载，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/34179231/
我有一个EC2实例正在运行。我有一个负载均衡器，它与EC2实例相关联。PingTarget:HTTP:3001/healthCheckTimeout:5secondsInterval:24secondsUnhealthythreshold:2Healthythreshold:10现在该实例显示为OutofService。我什至尝试更改监听端口等等。一切正常，直到重新启动我的EC2实例。任何帮助将不胜感激。仅供引用:我有一个在端口3001上运行的Rails应用程序，我有一个用于HTTP:80(loadbalancer)到HTTP:3001的监听器。我还在终端中通过ssh检查了正在运行的应
我对为我的RubyonRails3.1.3应用优化我的Unicorn设置的方法很感兴趣。我目前正在高CPU超大实例上生成14个工作进程，因为我的应用程序在负载测试期间似乎受CPU限制。在模拟负载测试中，每秒大约20个请求重放请求，我的实例上的所有8个内核都达到峰值，盒子负载飙升至7-8个。每个unicorn实例使用大约56-60%的CPU。我很好奇可以通过哪些方式对其进行优化？我希望能够每秒将更多请求汇集到这种大小的实例上。内存和所有其他I/O一样完全正常。在我的测试过程中，CPU越来越低。 最佳答案 如果您受CPU限制，您希望使用
假设我希望Ruby进程使用的CPU不超过15%。是否可以？怎么办？ 最佳答案 您可以尝试使用Process.setrlimit来自标准核心:Setstheresourcelimitoftheprocess.这看起来只是setrlimit的包装器来自C库，因此它可能仅在Unix-ish平台上可用。setrlimit不支持CPU百分比限制，但它支持以秒为单位限制CPU时间。如果您只是想让您的Ruby进程不占用整个CPU，那么您可以尝试使用Process.setpriority来调整它的优先级。这只是libc的setpriority的包装
我们正在使用Unicorn_Rails+nginx。它在我的系统(4GBRam，Intel(R)Core(TM)2DuoCPUP8600@2.40GHz)的开发模式和生产模式下运行良好我能够在本地系统中启动10个worker，但在任何情况下都无法在生产中启动超过2个有时它可以工作，但需要等待15-20米启动unicorn_rails时一直占用99.6%的CPU英特尔(R)至强(R)CPUE5507@2.27GHz但它卡在亚马逊(m1.small实例)1.73GB内存我发现没有人在任何地方谈论使用unicorn_rails启动缓慢...... 最佳答案
我在我的Rails应用程序中运行守卫，测试套件(最小的)最近停止正常工作。如果幸运的话，它会运行所有测试一次，也许两次。在那之后，即使是一个小的测试文件被更改也需要很长时间才能响应，以至于使用gem变得徒劳无功。在测试运行时跟随top，我可以看到有一个ruby进程持续占用了超过100%的CPU。即使所有测试都已运行并且我没有对文件进行任何更改。ruby进程是:/Users/Bodacious/.rvm/gems/ruby-2.0.0-p247@MyApp/gems/rb-fsevent-0.9.3/bin/fsevent_watch--latency0.1/Users/Bodaio
我是Sidekiq的新手，将它与AmazonEC2实例上的Ruby结合使用，以使用ImageMagick处理图像来完成一些工作。在运行它时，我意识到每个工作人员都在同一个核心上运行。我使用EC2c3.2xlarge机器，它们有8个内核。它显示CPU使用率为15%，但一个内核使用了100%，而其他内核使用了0%。Sidekiq可以为不同的worker使用不同的CPU内核吗？如果可以，这种低效率是由ImageMagic造成的吗？我怎样才能让它使用其他内核？ 最佳答案 如果您想使用MRI使用多个内核，则需要启动多个Sidekiq进程；为您
我每12小时在我的亚马逊EC2微型实例上运行一次cron作业。它下载118MB的文件并使用json库解析它。这当然会使实例内存不足。我的实例有416MB的可用内存，但随后我运行脚本，它下降到6MB，然后被操作系统杀死。我想知道我在这里有什么选择？是否可以通过Ruby有效地解析它，或者我是否必须下降到像C这样的低级东西？我可以获得一个功能更强大的亚马逊实例，但我真的很想知道是否可以通过Ruby做到这一点。更新:我看过yajl。它可以在解析时为您提供json对象，但问题是，如果您的JSON文件仅包含1个根对象，那么它将被迫解析所有文件。我的JSON看起来像这样:--Root-Obj1-Ob
文章目录Kubernetes（k8s）工作负载一、Workloads二、Pod三、Deployment四、RC、RS、DaemonSet、StatefulSet五、Job、CronJob1、Job2、CronJob六、GCKubernetes（k8s）工作负载一、Workloads什么是工作负载（Workloads）工作负载是运行在Kubernetes上的一个应用程序。一个应用很复杂，可能由单个组件或者多个组件共同完成。无论怎样我们可以用一组Pod来表示一个应用，也就是一个工作负载Pod又是一组容器（Containers）所以关系又像是这样工作负载（Workloads）控制一组PodPod控制
我们有一个大型Rails应用程序，几天后，我们的ruby进程似乎陷入循环并占用100%的CPU，直到乘客服务器死机并引发502错误。您知道找出原因的最佳方法吗？我已经尝试过NewRelic，但它只是性能方面的东西，而且我们的错误太多了，无法猜测问题出在哪里。(我们每天有很多请求和很多UTF-8BSON错误，因为我们使用的是UTF-8url)使用:Rails3.2.6和Ruby1.9.2p290乘客3.0.13MongoDB2.0.1和Mongoid2.4.11NginxFreeBSD8.2 最佳答案 找出ruby卡住位置的简便方
我可以在一个Rails应用程序中同时使用MongoDB和PostgreSQL吗？具体来说，我最终会想要使用像MongoHQ这样的东西。到目前为止，我未能在实验中进行这项工作。令我担心的是，MongoDB文档特别指出我必须禁用ActiveRecord。任何建议将不胜感激。 最佳答案 您无需禁用ActiveRecord即可使用MongoDB。查看Mongoid只需将gem加上任何模型与您现有的任何ActiveRecord模型一起添加。您应该注意到MongoHQ只是MongoDB的托管服务，可以与任何对象文档映射器(ODM)一起使用。更多
