草庐IT

生命周期短的mongodb

coder 2023-11-03 原文

我们正在运行 mongodb 来存储大量对象(每天约 100 万个)且生命周期很短(约 15 分钟)。每天总虚拟内存(== 数据库文件大小)使用量约为 50gb。当前的工作流程如下所示:

  1. 存储对象
  2. 每 15 分钟删除一次旧对象
  3. 在夜间运行修复 - 服务器在修复时挂起约 20 分钟。

请问mongo是否适合短命对象。如果是 - 我们应该根据默认配置更改哪些配置设置。如果否 - 应使用哪种 nosql(基于文档，因为我们存储类似 JSON 的对象)解决方案。

谢谢

最佳答案

A capped collection如果您可以很好地估计大小，则可能是这种用法的不错选择。您可以显式创建上限集合，而不是像处理普通集合那样隐式创建上限集合，并且可以指定最大大小。当新文档添加到上限集合时，旧文档将自动删除。空间使用是恒定的，删除是隐式的，一天结束时没有什么可以修复的。缺点是如果您的大小需求实际上在增长，因为您需要创建新的(更大的)上限集合来维持相同的文档生命周期。

“TTL 集合”(https://jira.mongodb.org/browse/SERVER-211) 中描述了 future 的可能性。此功能不在任何已发布的版本中，但可能正是您所需要的，使您的维护自动化。您可以在我链接到的页面上“观看”该功能并为其投票，但它已安排在下一个版本中。

关于生命周期短的mongodb，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/9783480/

mongodb生命sectionnoreferrernosql

有关生命周期短的mongodb的更多相关文章

  1. ruby - 覆盖相似的方法，更短的语法 - 2

    在Ruby类中，我重写了三个方法，并且在每个方法中，我基本上做同样的事情:classExampleClassdefconfirmation_required?is_allowed&&superenddefpostpone_email_change?is_allowed&&superenddefreconfirmation_required?is_allowed&&superendend有更简洁的语法吗？如何缩短代码？ 最佳答案 如何使用别名？classExampleClassdefconfirmation_required?is_a

  2. ruby - 在 Ruby 中查找周期和范围集差异的有效方法 - 2

    我在Ruby中有很多时间范围:period=Time.parse('8:00am')..Time.parse('8:00pm')incidents=[Time.parse('7:00am')..Time.parse('9:00am'),Time.parse('1:00pm')..Time.parse('3:00pm'),Time.parse('1:30pm')..Time.parse('3:30pm'),Time.parse('7:00pm')..Time.parse('9:00pm'),]我正试图在这段时间内获得一系列无事件block。对于以上内容:[Time.parse('9:00

  3. ruby-on-rails - 有没有一种简单的方法可以在 Passenger 的请求周期之外运行垃圾收集？ - 2

    unicorn有OobGC可用于在一定数量的请求后运行GC.start的机架中间件。PhusionPassenger中有类似的东西吗？ 最佳答案 PhusionPassenger4正式引入了带外垃圾回收机制。它比Unicorn更灵活，允许任意工作，而不仅仅是垃圾收集。http://blog.phusion.nl/2013/01/22/phusion-passenger-4-technology-preview-out-of-band-work/ 关于ruby-on-rails-有没有一种

  4. ruby-on-rails - 在一个 Rails 应用程序中使用 PostgreSQL 的 MongoDB - 2

    我可以在一个Rails应用程序中同时使用MongoDB和PostgreSQL吗？具体来说，我最终会想要使用像MongoHQ这样的东西。到目前为止，我未能在实验中进行这项工作。令我担心的是，MongoDB文档特别指出我必须禁用ActiveRecord。任何建议将不胜感激。 最佳答案 您无需禁用ActiveRecord即可使用MongoDB。查看Mongoid只需将gem加上任何模型与您现有的任何ActiveRecord模型一起添加。您应该注意到MongoHQ只是MongoDB的托管服务，可以与任何对象文档映射器(ODM)一起使用。更多

  5. ruby - 使用 mongodb/mongoid 运行时更改模型 - 2

    我必须在mongoid模型中添加几个字段，我知道MongoDB没有迁移，但如果我继续而不删除数据库，使rails完全“重新生成”数据库，它不会显示或使用新的领域!去这里最好的方法是什么？有比删除/重新打开mongodb更软的东西吗？提前致谢卢卡 最佳答案 一般来说，应该可以在运行时用新字段更新旧文档。MongoDB中不需要迁移。您可能想编写rake任务以使用新字段和默认值更新旧文档。您可以通过检查那些默认值为nil的新字段来找到这些文档。更新简单风格:如果您使用默认值定义一个新字段，只要您设置了一个新值，就应该始终使用该值:应用程序

  6. ruby-on-rails - 我如何从 Ruby 代码连接到 mongodb？ - 2

    我如何从Ruby代码连接到mongodb？ 最佳答案 首先，您必须安装MongoDbgem:geminstallmongo然后运行代码:require'rubygems'#notnecessaryforRuby1.9require'mongo'db=Mongo::Connection.new.db("mydb")#ORdb=Mongo::Connection.new("localhost").db("mydb")#ORdb=Mongo::Connection.new("localhost",27017).db("mydb")

  7. ruby - MongoDB:无法从 BSON 类型 EOO 转换为 Date - 2

    我正在尝试使用聚合框架(使用ruby​​)并像这样投影日期:db['requests'].aggregate([{"$project"=>{_id:0,method:'$method',user:'$user',year:{'$year'=>'$timestamp'}}}])文档是这样的:{_id:ObjectId("5177d7d7df26358289da7dfd"),timestamp:ISODate("2013-04-12T03:58:05+00:00"),method:"POST",status:"200",inputsize:"874",outputsize:"4981",u

  8. ruby - 在 Ruby 中从 MongoDB 中检索字段的子集 - 2

    我试图通过在Ruby中进行的查询从MongoDB获取字段的子集，但它似乎不起作用。它不返回任何结果这是ruby代码:coll.find("title"=>'Halo',:fields=>["title","isrc"])#thisdoesn'twork如果我删除字段散列，它会工作，返回包含所有字段的结果coll.find("title"=>'Halo')#thisworks查看mongodb控制台，第一个查询在mongodb服务器上结束，如下所示:{title:"Halo",fields:["title","isrc"]}如果我尝试从mongo客户端控制台进行查询，它会工作，我会得到结

  9. ruby - RSpec 较短的测试失败回溯输出 - 2

    我正在使用RSpec(最新版本2.12.2)来测试我正在处理的一个小型Rub​​y类。我的问题是，当RSpec测试失败时，测试输出看起来非常冗长，并显示了一个巨大的错误消息列表，几乎是一个完整的回溯。这意味着我必须向上滚动才能看到实际的错误消息和跟踪的顶部。我相信默认情况下RSpec应该这样做，但它似乎并没有为我做这件事。例如，如果我运行rspecspec/my_spec.rb:132(只运行一个在L132上的测试)，我得到这个输出:Failure/Error:@f.has_changed?("test").shouldbe_trueexpected:truevaluegot:fals

  10. ruby-on-rails - rails 周期性任务 - 2

    我有一个ruby​​onrails应用程序，我试图在其中找到每隔几秒运行一些代码的方法。我发现了很多使用cron或类似cron的实现的信息和想法，但这些只是准确到分钟，并且/或需要外部工具。我想每15秒左右启动一次任务，并且我希望它完全独立于应用程序中(如果应用程序停止，任务也停止，并且没有外部设置)。这用于缓存数据的后台生成。每隔几秒，任务就会收集一些数据，然后将其存储在缓存中，供所有客户端请求使用。该任务非常慢，因此需要在后台运行并且不阻塞客户端请求。我是ruby​​的新手，但有很强的perl背景，我解决这个问题的方法是创建一个间隔计时器和处理程序，它fork、运行代码，然后在完成

随机推荐