草庐IT

守护线程

全部标签

Ruby 并行/多线程编程来读取巨大的数据库

我有一个ruby​​脚本读取一个巨大的表(约2000万行),进行一些处理并将其提供给Solr用于索引目的。这一直是我们流程中的一大瓶颈。我打算在这里加快速度,我想实现某种并行性。我对Ruby的多线程特性感到困惑。我们的服务器有ruby1.8.7(2009-06-12补丁级别174)[x86_64-linux]。来自thisblogpost和thisquestionatStackOverflow可见Ruby没有“真正的”多线程方法。我们的服务器有多个核心,所以使用parallelgem对我来说似乎是另一种方法。我应该采用什么方法?此外,我们将非常感谢您对并行数据库读取馈送系统的任何投入。

ruby - Ruby 中的工作线程

我正在使用ruby​​+qt编写一个简单的内存游戏(试图暂时摆脱c++...)为了允许X秒超时来查看两个打开的部分,我需要计时器或在后台线程中完成工作。在不重新发明轮子的情况下实现这一点的最简单方法是什么?ruby线程?Qt线程?Qt定时器? 最佳答案 我不知道这是否是最好的解决方案,但是:block=Proc.new{Thread.pass}timer=Qt::Timer.new(window)invoke=Qt::BlockInvocation.new(timer,block,"invoke()")Qt::Object.conn

Ruby 1.9 线程池

据我所知,Ruby1.9使用OS线程,但实际上只有一个线程仍会并发运行(尽管一个线程可能正在执行阻塞IO而另一个线程正在执行处理)。我见过的线程示例只是使用Thread.new来启动一个新线程。由于具有Java背景,我通常使用线程池来避免启动许多新线程,因为它们是“重量级的”。Ruby中是否内置了线程池结构?我没有在默认语言库中看到一个。或者是否有通常使用的标准gem?由于操作系统级线程是ruby​​的一个较新的特性,我不知道这些库对它有多成熟。 最佳答案 您是正确的,因为默认的CRuby解释器一次只执行一个线程(其他基于C的动态语

ruby - Phusion passenger 中的多个请求是否在各自的线程中运行?

我有一个使用Phusionpassenger+Apache网络服务器部署的RubyonRails应用程序。每个请求是否都在由PhusionPassenger生成的自己的线程中运行? 最佳答案 Passenger(以及大多数其他应用程序服务器)每个线程运行不超过一个请求。通常每个进程也只有一个线程。来自PhusionPassengerdocs:PhusionPassengersupportstwoconcurrencymodels:process:single-threaded,multi-processedI/Oconcurrenc

Ruby 一次只创建 3 个线程

我正在尝试运行500个客户端同时向服务器发送一些请求以进行负载测试。客户端又是一个ruby​​程序。听起来微不足道。但是我遇到了ruby​​线程的奇怪问题。我的代码看起来像这样-n=10n.timesdoThread.newdo`calc`endend代码是示例。我只是想从命令行运行calc命令(如果您在Windows以外的平台上尝试此代码,请将其替换为在您的命令行或shell上运行的一些命令)。稍后将替换为“rubymy_client.rb”,并且n的值将设置为500(或其他值)。我在这里面临的问题是,无论我想创建多少个线程,一次只能创建3个线程。也就是说只有3个计算窗口同时打开。其

ruby - 启动和停止 Ruby 线程

我如何从另一个线程中启动和停止一个单独的线程?loop_a_stopped=trueloop_a=Thread.newdoloopdoThread.stopifloop_a_stopped#Dostuffsleep3endendloop_b=Thread.newdoloopdoresponse=ask(">")caseresponse.strip.downcasewhen"start"loop_a_stopped=falseloop_a.runwhen"stop"loop_a_stopped=truewhen"exit"breakendendendloop_a.joinloop_b.j

[面试直通版]操作系统核心之进程、线程与协程(下)

点击->操作系统复习的文章集目录操作系统线程线程是什么进程与线程的关系用户态/内核态操作系统资源管理内核态用户态内核态/用户态切换程序运行类型分析计算密集型IO密集型结合进程,线程来理解程序运行类型分析协程基础上下文切换协程协程为什么叫协作式线程?协程的优缺点操作系统线程典型问题:简述进程和线程的区别以下内容带您一步步了解线程是什么比进程更小的独立运行的基本单位-线程(Threads)线程的提出主要是为了提高系统内程序并发执行的程度,从而进一步提升系统的吞吐量,充分发挥多核CPU的优越性而设计的引入进程是为了操作系统更加方便地管理程序,使得多个程序能并发管理和执行而线程则是为了减少程序在并发执

Handler在UI线程与子线程中的使用

Handler在UI线程与子线程中的使用一、Handler基本概念Handler:其作用是在新启动的线程中发送消息,在主线程中获取和处理消息。Message:Handler接收和处理的消息对象。MessageQueue:消息队列,采用先进先出的方式来管理Message。由Looper对象进行管理,在程序创建Looper对象时,会在它的构造方法中创建MessageQueue对象,两者是相互依存的。Looper:每个线程只能拥有一个Looper对象。它在loop()方法会不断在MessageQueue中读取Message消息,分给对应的Handler来进行处理。二、Handler使用步骤在主线程中

ruby - 为什么退出 Ruby 线程会杀死我的整个程序?

我有这段代码:puts"Start"loopdoThread.startdoputs"Hellofromthread"exitendtext=getsputs"#{text}"endputs"Done"我希望看到“Start”后跟“Hellofromthread”,然后我可以输入会得到回显的输入。相反,我得到“Start”和“Hellofromthread”,然后程序退出。来自关于exit的文档:Terminatesthrandschedulesanotherthreadtoberun.Ifthisthreadisalreadymarkedtobekilled,exitreturnst

ruby-on-rails - rb_gc() 上的跨线程冲突

我正在处理的代码库最近从Ruby1.9.2升级到Ruby1.9.3,从Rails3.1升级到Rails3.2.2。因为我使用的是RVM,所以我只是简单地执行了rvminstall1.9.3,我原以为这是所有必要的。当我运行时railss我得到了错误[BUG]cross-threadviolationonrb_gc()我找到了许多与此问题相关的链接。有oneonStackOverflow,但它并没有真正给出答案。最有希望的答案是ontheRVMsite:IneverycaseofthisIhaveseenthusfarithasalwaysendedupbeingthatarubygem