草庐IT

并行计算

全部标签

ruby - 如何从 ruby​​ 脚本并行启动多个 rake

我有一个ruby​​脚本,我想从中启动4个并行运行的rake任务。我该怎么做?我想我需要fork并分离一个进程,但我需要确切的语法。 最佳答案 最好让Rake处理并行性。您可以使用“多任务”来做到这一点。在Rakefile中:desc"Starteverything."multitask:start=>['mongodb:start','haystack:start']Backgroundandsource.否则,假设您是从Rakefile外部执行此操作,您可以使用像这样的可怕代码,它不会像您预期的那样抛出异常,并且很容易以多种方式

ruby - 如何使用 Ruby(和 open-uri)并行处理数组中的项目

我想知道如何使用open-uri打开多个并发连接?我认为我需要以某种方式使用线程或纤维,但我不确定。示例代码:defget_doc(url)beginNokogiri::HTML(open(url).read)rescueException=>exputs"Failedat#{Time.now}"puts"Error:#{ex}"endendarray_of_urls_to_process=[......]#HowcanIiterateoveritemsinthearrayinparallel(insteadofoneatatime?)array_of_urls_to_process.

ruby-on-rails - 如何计算 Rails 中的下一个、上一个工作日?

如何在Rails中计算下一个和上一个工作日? 最佳答案 据我了解,这就是您要找的东西?(测试过)require'date'defnext_business_day(date)skip_weekends(date,1)enddefprevious_business_day(date)skip_weekends(date,-1)enddefskip_weekends(date,inc=1)date+=incwhiledate.wday==0||date.wday==6date+=incenddateend您可以按如下方式进行测试:beg

ruby - ruby 中的并行 HTTP 请求

我有一组URL,我不想打开每个URL并获取特定标签。但我想并行执行此操作。这是我想做的伪代码:urls=[...]tags=[]urls.eachdo|url|fetch_tag_asynchronously(url)do|tag|tags如果这能以一种安全的方式完成,那就太棒了。我可以使用线程,但它看起来不像数组在ruby​​中是线程安全的。 最佳答案 您可以使用Mutex实现线程安全:require'thread'#forMutexurls=%w(http://test1.example.org/http://test2.exa

ruby-on-rails - 为什么我的自引用模板会破坏控制台和 rake 中的缓存摘要计算,但不会破坏服务器中的缓存摘要计算?

我有两个部分相互引用。当我在控制台中计算嵌套依赖项时(使用一些调试代码输出正在加载哪个模板):finder=ApplicationController.new.lookup_contextActionView::Digestor.new(name:"posts/show",finder:finder).nested_dependencies或者像这样通过rake任务:rakecache_digests:nested_dependenciesTEMPLATE=posts/show我得到一个初始依赖项的简短列表,然后在无限循环中,直到ruby​​堆栈已满:...>>>>>>>users/f

ruby - 为什么 10^9942066 是我可以计算而不会溢出的最大功率?

在ruby​​中,一些大数大于无穷大。通过二分查找,我发现:(1.0/0)>10**9942066.000000001#=>false(1.0/0)>10**9942066#=>trueRUBY_VERSION#=>"2.3.0"为什么是这样?109942066有什么特别之处?它似乎不是像9999999这样的任意数字,它不接近任何2的幂(它大约等于233026828.36662442)。为什么ruby的无穷大不是无穷大?109942066是怎么参与的?我现在意识到,任何大于109942066的数字都会溢出到无穷大:10**9942066.000000001#=>Infinity10**

ruby - 如何计算ruby服务器中正在运行的线程

我想在Sinatra网络服务器的线程中执行“长时间运行”-(执行大约需要0.5秒)任务。Web响应大约需要20毫秒,所以如果我很忙,线程就会堆积起来......所以我想如果我忙的话我会同步..if(running_thread_count>10)stuff_that_takes_a_second()elseThread.newdostuff_that_takes_a_second()endend您如何获得正在运行的线程数(我想要启动的线程数,但尚未完成运行)-您如何编写running_thread_count代码?defrunning_thread_countreturnThread.

ruby-on-rails - Rails 以月为单位计算日期范围

如何计算两个日期的月差?此外,如果它有所作为,我正在使用Date对象,而不是DateTime。此外,一些舍入选项可能会很好,这样我就可以控制是否要对部分月份进行向上或向下舍入。谢谢! 最佳答案 从一个Date或DateTime中减去另一个Date或DateTime将得到天数的分数,但这可以根据需要评估为Float或Fixnum。例如:(Date.today-Date.today.advance(:months=>-3)).to_f#=>89.0今天与三个月前的同一日历日期之间相隔89.0天。如果您使用30天的月份或平均30.4375

ruby - 下载前获取文件大小并计算已经下载了多少 (http+ruby)

谁能帮帮我在我开始下载之前获取文件大小显示已经下载了多少%.require'net/http'require'uri'url="http://www.onalllevels.com/2009-12-02TheYangShow_Squidoo_Part1.flv"url_base=url.split('/')[2]url_path='/'+url.split('/')[3..-1].join('/')Net::HTTP.start(url_base)do|http|resp=http.get(URI.escape(url_path))open("test.file","wb")do|fi

ruby - 在不弄乱输出的情况下打印 Ruby 中并行操作的输出的最简单方法是什么?

假设我fork了一堆线程,并希望将每个线程的进度输出打印到STDERR。我怎样才能确保输出保持行原子性,即不会在同一输出行中混淆来自不同线程的输出?#runthisafewtimesandyou'llseetheproblemthreads=[]10.timesdothreads 最佳答案 puts有一个竞争条件,因为它可能将换行符与行分开写。您可能会在多线程应用程序中使用puts看到这种噪音:thread0thread1thread0thread2thread1thread0thread3thread2thread1相反,使用pr