草庐IT

动态线程池

全部标签

Ruby 并行/多线程编程来读取巨大的数据库

我有一个ruby​​脚本读取一个巨大的表(约2000万行),进行一些处理并将其提供给Solr用于索引目的。这一直是我们流程中的一大瓶颈。我打算在这里加快速度,我想实现某种并行性。我对Ruby的多线程特性感到困惑。我们的服务器有ruby1.8.7(2009-06-12补丁级别174)[x86_64-linux]。来自thisblogpost和thisquestionatStackOverflow可见Ruby没有“真正的”多线程方法。我们的服务器有多个核心,所以使用parallelgem对我来说似乎是另一种方法。我应该采用什么方法?此外,我们将非常感谢您对并行数据库读取馈送系统的任何投入。

ruby-on-rails - ruby on rails 动态属性字段来自数据库使用 method_missing 问题

所以,以为我昨晚在工作,可以发誓。现在不行了,我想是时候寻求帮助了。我在数据库中定义动态字段,半EAV风格,让我们现在就说明我不想听听你对EAV是否​​是个好主意的意见:)无论如何,我做的这件事与我过去所做的有点不同,基本上当添加一个属性(或字段)时,我创建一个添加列到特定属性表迁移并运行它(或删除它)--无论如何,因为中间有一个类别层,它是定义所有属性的直接关系,所以我不能使用实际的属性名称作为列名称,因为属性是特定于类别的。所以,如果它能帮助你想象Entitybelongs_to:categoryCategoryhas_many:entitiesEntityAttributebel

ruby - Ruby 中的工作线程

我正在使用ruby​​+qt编写一个简单的内存游戏(试图暂时摆脱c++...)为了允许X秒超时来查看两个打开的部分,我需要计时器或在后台线程中完成工作。在不重新发明轮子的情况下实现这一点的最简单方法是什么?ruby线程?Qt线程?Qt定时器? 最佳答案 我不知道这是否是最好的解决方案,但是:block=Proc.new{Thread.pass}timer=Qt::Timer.new(window)invoke=Qt::BlockInvocation.new(timer,block,"invoke()")Qt::Object.conn

Ruby 1.9 线程池

据我所知,Ruby1.9使用OS线程,但实际上只有一个线程仍会并发运行(尽管一个线程可能正在执行阻塞IO而另一个线程正在执行处理)。我见过的线程示例只是使用Thread.new来启动一个新线程。由于具有Java背景,我通常使用线程池来避免启动许多新线程,因为它们是“重量级的”。Ruby中是否内置了线程池结构?我没有在默认语言库中看到一个。或者是否有通常使用的标准gem?由于操作系统级线程是ruby​​的一个较新的特性,我不知道这些库对它有多成熟。 最佳答案 您是正确的,因为默认的CRuby解释器一次只执行一个线程(其他基于C的动态语

ruby - 如何为类方法动态定义别名方法?

我有一个名为“计算器”的模块,我想将其包含在“产品”类中。Calculator将扩展“Product”,它将类方法复制到Product上。这些类方法之一是“memoize”。我的想法是我可以做这样的事情:moduleCalculatordefself.extended(base)base.memoize:foo_barendend以内存方法(特别是类方法)为目的:foo_bar。在memoize内部,我调用方法“alias_method”,它试图将类方法别名为不同的名称(此处为:foo_bar)。这失败了。Memoize看起来像这样:moduleCalculator(theextend

ruby - Phusion passenger 中的多个请求是否在各自的线程中运行?

我有一个使用Phusionpassenger+Apache网络服务器部署的RubyonRails应用程序。每个请求是否都在由PhusionPassenger生成的自己的线程中运行? 最佳答案 Passenger(以及大多数其他应用程序服务器)每个线程运行不超过一个请求。通常每个进程也只有一个线程。来自PhusionPassengerdocs:PhusionPassengersupportstwoconcurrencymodels:process:single-threaded,multi-processedI/Oconcurrenc

Ruby 一次只创建 3 个线程

我正在尝试运行500个客户端同时向服务器发送一些请求以进行负载测试。客户端又是一个ruby​​程序。听起来微不足道。但是我遇到了ruby​​线程的奇怪问题。我的代码看起来像这样-n=10n.timesdoThread.newdo`calc`endend代码是示例。我只是想从命令行运行calc命令(如果您在Windows以外的平台上尝试此代码,请将其替换为在您的命令行或shell上运行的一些命令)。稍后将替换为“rubymy_client.rb”,并且n的值将设置为500(或其他值)。我在这里面临的问题是,无论我想创建多少个线程,一次只能创建3个线程。也就是说只有3个计算窗口同时打开。其

ruby - 我可以让 ruby​​ 打印动态方法的源代码吗?

我调查了gettingthesourcecodeofamethod如果它作为文件存在,但没有此文件引用,是否可以动态打印方法的源代码?看来我可以使用self.methods和每个方法的.arity访问类中的方法签名。我相信ri_forgem指的是原始源文件。提出这个问题的更好方法是:如果一个类在运行时被扩展,它的源代码是否安全,不会被调查?或者调查的能力是否仅限于方法签名和实例变量的名称,也许是类变量?编辑:我使用的解决方案:http://seattlerb.rubyforge.org/svn/ruby2ruby/1.2.1/lib/ruby2ruby.rbclassRuby2Ruby

ruby - 启动和停止 Ruby 线程

我如何从另一个线程中启动和停止一个单独的线程?loop_a_stopped=trueloop_a=Thread.newdoloopdoThread.stopifloop_a_stopped#Dostuffsleep3endendloop_b=Thread.newdoloopdoresponse=ask(">")caseresponse.strip.downcasewhen"start"loop_a_stopped=falseloop_a.runwhen"stop"loop_a_stopped=truewhen"exit"breakendendendloop_a.joinloop_b.j

ruby-on-rails - 在运行时将模块动态包含到模型中?

我有一个“事务”(扩展ActiveRecord::Base)。我有两种不同类型的交易,“购买”或“捐赠”。两者之间有足够多的重叠,因此无需创建两个单独的数据库表,因此我只有一个表用于包含“item_type”列的交易。但是,购买和捐赠有不同的方法和验证,因此将它们分成两个不同的Controller和模型是有意义的。我没有创建ActiveBase模型(减去表格),而是尝试为每个模型使用模块。这是Purchase模块的样子。modulePurchasedefself.included(base)base.validates:amount,:presence=>trueenddeftesti