我有两个存储(PostgreSQL、MongoDB),因为我需要在我的计算机上本地开发应用程序(最好是离线),我需要将这些存储中的数据复制到我的硬盘上。
无论如何,这些都是拥有大约数百 GB 数据的大型数据库。
我不需要将所有数据都存储在那里,只需要其中的样本就可以在该数据上本地启动我的应用程序。两种存储都有一些功能强大的数据导出工具(pg_dump、mongodump、mongoexport 等)。
但我不知道如何轻松有效地导出小样本数据。即使我会获取所有表/集合的列表并构建一些白名单,这将定义表,这些表应该限制在行数上,触发器、函数、索引等也会出现问题。
最佳答案
我不知道如何测试 MongoDB,但对于 PostgreSQL,这就是我所做的。
我在开发数据库时遵循一种模式,将数据库端与应用程序端分开。为了测试数据库端,我有一个测试模式,其中包括一个重置真实模式中所有数据的存储过程。此重置是按照 MERGE 模式完成的(删除任何具有无法识别的键的记录,更新具有匹配键但已更改的记录,并插入丢失的记录)。在运行每个单元测试之前调用此重置。这为我提供了简单、清晰的存储函数测试覆盖率。
为了测试调用数据库的代码,数据库层总是被模拟,因此永远不会有任何调用实际进入数据库。
您所描述的内容向我暗示您正在尝试将单元测试与集成测试混合使用,我强烈建议您不要这样做。集成测试是在您已经证明了基本功能并想证明组件之间的集成以及可能还想证明性能时发生的事情。对于 IT,您确实需要代表性硬件上的代表性数据集。通常这意味着一台专用机器,并使用 hudson 进行 CI。
您似乎要前进的方向会很困难,因为正如您已经注意到的那样,很难处理那么大的数据量并且很难生成具有代表性的数据集(大多数 CI 系统实际上使用的生产数据是已“清除”敏感信息)
这就是为什么我工作过的大多数地方都没有这样做的原因。
关于postgresql - 大型数据库如何搭建本地环境,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/7688485/
我正在学习如何使用Nokogiri,根据这段代码我遇到了一些问题:require'rubygems'require'mechanize'post_agent=WWW::Mechanize.newpost_page=post_agent.get('http://www.vbulletin.org/forum/showthread.php?t=230708')puts"\nabsolutepathwithtbodygivesnil"putspost_page.parser.xpath('/html/body/div/div/div/div/div/table/tbody/tr/td/div
总的来说,我对ruby还比较陌生,我正在为我正在创建的对象编写一些rspec测试用例。许多测试用例都非常基础,我只是想确保正确填充和返回值。我想知道是否有办法使用循环结构来执行此操作。不必为我要测试的每个方法都设置一个assertEquals。例如:describeitem,"TestingtheItem"doit"willhaveanullvaluetostart"doitem=Item.new#HereIcoulddotheitem.name.shouldbe_nil#thenIcoulddoitem.category.shouldbe_nilendend但我想要一些方法来使用
关闭。这个问题是opinion-based.它目前不接受答案。想要改进这个问题?更新问题,以便editingthispost可以用事实和引用来回答它.关闭4年前。Improvethisquestion我想在固定时间创建一系列低音和高音调的哔哔声。例如:在150毫秒时发出高音调的蜂鸣声在151毫秒时发出低音调的蜂鸣声200毫秒时发出低音调的蜂鸣声250毫秒的高音调蜂鸣声有没有办法在Ruby或Python中做到这一点?我真的不在乎输出编码是什么(.wav、.mp3、.ogg等等),但我确实想创建一个输出文件。
给定这段代码defcreate@upgrades=User.update_all(["role=?","upgraded"],:id=>params[:upgrade])redirect_toadmin_upgrades_path,:notice=>"Successfullyupgradeduser."end我如何在该操作中实际验证它们是否已保存或未重定向到适当的页面和消息? 最佳答案 在Rails3中,update_all不返回任何有意义的信息,除了已更新的记录数(这可能取决于您的DBMS是否返回该信息)。http://ar.ru
我在我的项目目录中完成了compasscreate.和compassinitrails。几个问题:我已将我的.sass文件放在public/stylesheets中。这是放置它们的正确位置吗?当我运行compasswatch时,它不会自动编译这些.sass文件。我必须手动指定文件:compasswatchpublic/stylesheets/myfile.sass等。如何让它自动运行?文件ie.css、print.css和screen.css已放在stylesheets/compiled。如何在编译后不让它们重新出现的情况下删除它们?我自己编译的.sass文件编译成compiled/t
我正在寻找执行以下操作的正确语法(在Perl、Shell或Ruby中):#variabletoaccessthedatalinesappendedasafileEND_OF_SCRIPT_MARKERrawdatastartshereanditcontinues. 最佳答案 Perl用__DATA__做这个:#!/usr/bin/perlusestrict;usewarnings;while(){print;}__DATA__Texttoprintgoeshere 关于ruby-如何将脚
我主要使用Ruby来执行此操作,但到目前为止我的攻击计划如下:使用gemsrdf、rdf-rdfa和rdf-microdata或mida来解析给定任何URI的数据。我认为最好映射到像schema.org这样的统一模式,例如使用这个yaml文件,它试图描述数据词汇表和opengraph到schema.org之间的转换:#SchemaXtoschema.orgconversion#data-vocabularyDV:name:namestreet-address:streetAddressregion:addressRegionlocality:addressLocalityphoto:i
Rackup通过Rack的默认处理程序成功运行任何Rack应用程序。例如:classRackAppdefcall(environment)['200',{'Content-Type'=>'text/html'},["Helloworld"]]endendrunRackApp.new但是当最后一行更改为使用Rack的内置CGI处理程序时,rackup给出“NoMethodErrorat/undefinedmethod`call'fornil:NilClass”:Rack::Handler::CGI.runRackApp.newRack的其他内置处理程序也提出了同样的反对意见。例如Rack
在选择我想要运行操作的频率时,唯一的选项是“每天”、“每小时”和“每10分钟”。谢谢!我想为我的Rails3.1应用程序运行调度程序。 最佳答案 这不是一个优雅的解决方案,但您可以安排它每天运行,并在实际开始工作之前检查日期是否为当月的第一天。 关于ruby-如何每月在Heroku运行一次Scheduler插件?,我们在StackOverflow上找到一个类似的问题: https://stackoverflow.com/questions/8692687/
我有一个对象has_many应呈现为xml的子对象。这不是问题。我的问题是我创建了一个Hash包含此数据,就像解析器需要它一样。但是rails自动将整个文件包含在.........我需要摆脱type="array"和我该如何处理?我没有在文档中找到任何内容。 最佳答案 我遇到了同样的问题;这是我的XML:我在用这个:entries.to_xml将散列数据转换为XML,但这会将条目的数据包装到中所以我修改了:entries.to_xml(root:"Contacts")但这仍然将转换后的XML包装在“联系人”中,将我的XML代码修改为