草庐IT

performance - 如何修改现有的 MongoDB 索引?

coder 2023-10-30 原文

我的 MongoDB 中有一系列索引,我认为我以如此高的 CPU 运行系统的原因之一是更新索引会阻塞。 (AWS 微型实例在正常操作期间以 50% 以上的 CPU 运行,在繁重的写入操作期间以 99.9% 的速度运行)。

我已经准备好一些用于快速查询的索引,现在我认为我可以通过将索引构建转移到后台操作来展示一些进一步的改进。

不想完全删除索引(至少我不这么认为)相反,如果只是“ future 操作”在后台运行,我会很高兴。

我查看了 mongo 索引构建文档 http://www.mongodb.org/display/DOCS/Indexes并查看用于打开后台操作的标志(见下文),但我没有看到有关如何修改现有索引的任何内容。

 db.things.ensureIndex({x:1}, {background:true});
 > db.things.ensureIndex({name:1}, {background:true, unique:true,
 ... dropDups:true});

我尝试使用更新后的参数再次运行原始索引命令,但是当我重新执行 db.colection.getIndexes(); 命令时,它没有显示“背景”输出中的参数。

{
    "_id" : ObjectId("4de2c1a5c9907a4e77467826"),
    "ns" : "mydb.items",
    "key" : {
        "itemA" : 1,
        "itemB" : -1,
        "itemC" : -1
    },
    "name" : "itemA_1_itemB_-1_itemC_-1",
    "v" : 0
}

我是否必须删除索引并重新开始?还是 index-in-background 的参数根本没有显示?

来自评论的@TTT: 您想在插入、更新或删除文档后异步更新索引吗?

认为是的。我希望系统的查询速度始终保持最大,所以我肯定需要索引,但也有运行数万次插入的时候。这成为整个系统的问题,因为 Mongo 的 CPU 使用率在更新期间飙升至 99.9%。

我认为在后台更新索引是答案,但我在 MONGO 文档中读到如果正在重新计算索引,则在重新计算完成之前不会将其用于查询。

我理想的“理想情况”是系统将使用“最后的最佳索引”直到后台更新过程完成(或者甚至只是始终使用当前最知名的索引)。

最佳答案

您的索引系统听起来非常合理。您看到的问题似乎是您正在使用的服务器设置的症状。

众所周知,EC2 微型实例在任何类型的持续运行方面都表现不佳。提供网页服务很好,但任何长时间的 CPU 使用都会随着时间的推移看到输出质量下降。这是因为持续可用的 CPU 比可用于较短操作的突发 CPU 小得多。

来自 Amazon 的 EC2 页面:

Instances of this family provide a small amount of consistent CPU resources and allow you to burst CPU capacity when additional cycles are available. They are well suited for lower throughput applications and web sites that consume significant compute cycles periodically.

和:

Up to 2 EC2 Compute Units (for short periodic bursts)

我建议转移到具有更多可用 CPU 的设置,例如小型实例,或者如果成本是您的主要关注点之一,则使用 Linode VPS。

关于performance - 如何修改现有的 MongoDB 索引?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/6179096/

有关performance - 如何修改现有的 MongoDB 索引?的更多相关文章

  1. ruby - 如何使用 Nokogiri 的 xpath 和 at_xpath 方法 - 2

    我正在学习如何使用Nokogiri,根据这段代码我遇到了一些问题:require'rubygems'require'mechanize'post_agent=WWW::Mechanize.newpost_page=post_agent.get('http://www.vbulletin.org/forum/showthread.php?t=230708')puts"\nabsolutepathwithtbodygivesnil"putspost_page.parser.xpath('/html/body/div/div/div/div/div/table/tbody/tr/td/div

  2. ruby - 如何从 ruby​​ 中的字符串运行任意对象方法? - 2

    总的来说,我对ruby​​还比较陌生,我正在为我正在创建的对象编写一些rspec测试用例。许多测试用例都非常基础,我只是想确保正确填充和返回值。我想知道是否有办法使用循环结构来执行此操作。不必为我要测试的每个方法都设置一个assertEquals。例如:describeitem,"TestingtheItem"doit"willhaveanullvaluetostart"doitem=Item.new#HereIcoulddotheitem.name.shouldbe_nil#thenIcoulddoitem.category.shouldbe_nilendend但我想要一些方法来使用

  3. python - 如何使用 Ruby 或 Python 创建一系列高音调和低音调的蜂鸣声? - 2

    关闭。这个问题是opinion-based.它目前不接受答案。想要改进这个问题?更新问题,以便editingthispost可以用事实和引用来回答它.关闭4年前。Improvethisquestion我想在固定时间创建一系列低音和高音调的哔哔声。例如:在150毫秒时发出高音调的蜂鸣声在151毫秒时发出低音调的蜂鸣声200毫秒时发出低音调的蜂鸣声250毫秒的高音调蜂鸣声有没有办法在Ruby或Python中做到这一点?我真的不在乎输出编码是什么(.wav、.mp3、.ogg等等),但我确实想创建一个输出文件。

  4. ruby-on-rails - 如何验证 update_all 是否实际在 Rails 中更新 - 2

    给定这段代码defcreate@upgrades=User.update_all(["role=?","upgraded"],:id=>params[:upgrade])redirect_toadmin_upgrades_path,:notice=>"Successfullyupgradeduser."end我如何在该操作中实际验证它们是否已保存或未重定向到适当的页面和消息? 最佳答案 在Rails3中,update_all不返回任何有意义的信息,除了已更新的记录数(这可能取决于您的DBMS是否返回该信息)。http://ar.ru

  5. ruby-on-rails - 'compass watch' 是如何工作的/它是如何与 rails 一起使用的 - 2

    我在我的项目目录中完成了compasscreate.和compassinitrails。几个问题:我已将我的.sass文件放在public/stylesheets中。这是放置它们的正确位置吗?当我运行compasswatch时,它不会自动编译这些.sass文件。我必须手动指定文件:compasswatchpublic/stylesheets/myfile.sass等。如何让它自动运行?文件ie.css、print.css和screen.css已放在stylesheets/compiled。如何在编译后不让它们重新出现的情况下删除它们?我自己编译的.sass文件编译成compiled/t

  6. ruby - 如何将脚本文件的末尾读取为数据文件(Perl 或任何其他语言) - 2

    我正在寻找执行以下操作的正确语法(在Perl、Shell或Ruby中):#variabletoaccessthedatalinesappendedasafileEND_OF_SCRIPT_MARKERrawdatastartshereanditcontinues. 最佳答案 Perl用__DATA__做这个:#!/usr/bin/perlusestrict;usewarnings;while(){print;}__DATA__Texttoprintgoeshere 关于ruby-如何将脚

  7. ruby - 如何指定 Rack 处理程序 - 2

    Rackup通过Rack的默认处理程序成功运行任何Rack应用程序。例如:classRackAppdefcall(environment)['200',{'Content-Type'=>'text/html'},["Helloworld"]]endendrunRackApp.new但是当最后一行更改为使用Rack的内置CGI处理程序时,rackup给出“NoMethodErrorat/undefinedmethod`call'fornil:NilClass”:Rack::Handler::CGI.runRackApp.newRack的其他内置处理程序也提出了同样的反对意见。例如Rack

  8. ruby - 如何每月在 Heroku 运行一次 Scheduler 插件? - 2

    在选择我想要运行操作的频率时,唯一的选项是“每天”、“每小时”和“每10分钟”。谢谢!我想为我的Rails3.1应用程序运行调度程序。 最佳答案 这不是一个优雅的解决方案,但您可以安排它每天运行,并在实际开始工作之前检查日期是否为当月的第一天。 关于ruby-如何每月在Heroku运行一次Scheduler插件?,我们在StackOverflow上找到一个类似的问题: https://stackoverflow.com/questions/8692687/

  9. ruby-on-rails - 如何从 format.xml 中删除 <hash></hash> - 2

    我有一个对象has_many应呈现为xml的子对象。这不是问题。我的问题是我创建了一个Hash包含此数据,就像解析器需要它一样。但是rails自动将整个文件包含在.........我需要摆脱type="array"和我该如何处理?我没有在文档中找到任何内容。 最佳答案 我遇到了同样的问题;这是我的XML:我在用这个:entries.to_xml将散列数据转换为XML,但这会将条目的数据包装到中所以我修改了:entries.to_xml(root:"Contacts")但这仍然将转换后的XML包装在“联系人”中,将我的XML代码修改为

  10. ruby - 如何使用文字标量样式在 YAML 中转储字符串? - 2

    我有一大串格式化数据(例如JSON),我想使用Psychinruby​​同时保留格式转储到YAML。基本上,我希望JSON使用literalstyle出现在YAML中:---json:|{"page":1,"results":["item","another"],"total_pages":0}但是,当我使用YAML.dump时,它不使用文字样式。我得到这样的东西:---json:!"{\n\"page\":1,\n\"results\":[\n\"item\",\"another\"\n],\n\"total_pages\":0\n}\n"我如何告诉Psych以想要的样式转储标量?解

随机推荐