草庐IT

ruby - 有什么方法可以告诉 sidekiq 一项工作依赖于另一项工作

有什么方法可以告诉sidekiq一项工作依赖于另一项工作,并且在后者完成之前无法开始? 最佳答案 仅使用Sidekiq;答案是否定的。正如DickieBoy所建议的那样,您应该能够在依赖作业完成时将其启动。像这样。#app/workers/hard_worker.rbclassHardWorkerincludeSidekiq::Workerdefperform()puts'Doinghardwork'LazyWorker.perform_async()endend#app/workers/lazy_worker.rbclassLaz

ruby - 使用 Capistrano 启动 sidekiq

我想用Capistrano启动sidekiq。下面是代码namespace:sidekiqdotask:startdorun"cd#{current_path}&&bundleexecsidekiq-c10-eproduction-Llog/sidekiq.log&"pcapture("psaux|grepsidekiq|awk'{print$2}'|sed-n1p").strip!endend它执行成功但sidekiq仍然没有在服务器上启动。输出:$capsidekiq:starttriggeringloadcallbacks*2014-06-0315:03:01executing`

ruby - 我可以将 Sidekiq 用于连续流程吗?

我有几个当前作为rake任务运行的进程。我能以某种方式使用Sidekiq来连续循环执行进程吗?这是Sidekiq的最佳实践吗?这些进程,尽管它们现在在各自的rake任务中以连续循环的方式在后台运行,但偶尔会失败。然后我必须重新启动rake任务。在SO社区的帮助下,我正在尝试几个选项。一种是弄清楚如何使用monit监控rake任务。但这意味着每个进程都必须有自己的环境,增加了服务器负载。由于我在虚拟化环境中运行,因此我想尽可能消除它。另一个选择就是利用我已有的Sidekiq选项。我现在使用Sidekiq进行后台处理,但它总是一次性的。有什么方法可以让我在Sidekiq中有一个连续的过程?

ruby-on-rails - 优化读取数据库和写入csv文件

我正在尝试从数据库中读取大量单元格(超过100.000个)并将它们写入VPSUbuntu服务器上的csv文件。碰巧服务器没有足够的内存。我正在考虑一次读取5000行并将它们写入文件,然后再读取5000行,等等。我应该如何重构我当前的代码以使内存不会被完全消耗?这是我的代码:defwrite_rows(emails)File.open(file_path,"w+")do|f|f该函数由sidekiqworker调用:write_rows(user.emails)感谢您的帮助! 最佳答案 这里的问题是,当您调用emails.each时,

ruby - 如何在特定队列中推送作业并使用 sidekiq 限制工作人员数量?

我知道我们可以做到:sidekiq_optionsqueue:"Foo"但在这种情况下,Worker只分配给一个队列:“Foo”。我需要在特定队列中分配作业(而不是worker)。使用Resque很容易:Resque.enqueue_to(queue_name,my_job)另外,为了并发问题,我需要限制每个队列的Worker数量为1。我该怎么做? 最佳答案 您可能会使用https://github.com/brainopia/sidekiq-limit_fetch然后:Sidekiq::Client.push({'class'=>

ruby - Sidekiq 不创建 PID 文件

为了停止Sidekiq,我需要使用:$bundleexecsidekiqctlstop/Users/me/Documents/sites/some_site/tmp/pid/sidekiq.pid20我告诉Sidekiq在config.yml文件中创建一个pid文件:#/Users/me/Documents/sites/some_site/config.yml:pidfile:/Users/me/Documents/sites/some_site/tmp/pids/sidekiq.pid:concurrency:25并告诉Sidekiq这个配置文件在哪里使用:$bundleexecsi

ruby - Sidekiq 服务器未加载配置文件

我正在尝试使用我的sinatra应用程序设置sidekiq,并且我有使用配置文件启动sidekiqworker在守护进程模式下运行时遇到问题。我的项目有以下结构:project-config--sidekiq.yml#SidekiqConfigFile-app--app.rb#SinatraApplicationFile-Rakefile-Gemfile-etc.最终目标是创建一些rake任务来处理所有sidekiq任务。现在,我只是想通过命令行让它正常工作,然后我会通过rake让它工作。sidekiq.yml#SidekiqConfiguration---development:lo

ruby-on-rails - 使用 Sidekiq 时日期对象变成字符串

我有一个问题,当我将一些Date对象作为参数传递给不同的方法时,它们会变成String。在我的Rails应用程序中,有一项服务调用Sidekiqworker来执行模型中的方法。初始化服务对象时,它具有Date实例方法。我已经使用调试器确认了它们的类型。它使用perform_async将实例方法传递给Sidekiqworker。perform方法是Sidekiq的一种单行方法,它调用模型中的方法,将从服务接收的参数传递给模型。在模型端,从Sidekiqworker传入的参数不再是Date类型。它们是String(例如“2015-01-20”)。我已经使用degugger确认了这一点。关于

ruby - Sidekiq 可以利用多个 CPU 内核吗?

我是Sidekiq的新手,将它与AmazonEC2实例上的Ruby结合使用,以使用ImageMagick处理图像来完成一些工作。在运行它时,我意识到每个工作人员都在同一个核心上运行。我使用EC2c3.2xlarge机器,它们有8个内核。它显示CPU使用率为15%,但一个内核使用了100%,而其他内核使用了0%。Sidekiq可以为不同的worker使用不同的CPU内核吗?如果可以,这种低效率是由ImageMagic造成的吗?我怎样才能让它使用其他内核? 最佳答案 如果您想使用MRI使用多个内核,则需要启动多个Sidekiq进程;为您

ruby-on-rails - 限制 Sidekiq 中每个队列的工作人员数量

我一直在尝试使用sidekiq-limit_fetch来限制每个队列的工作人员数量gem,而Sidekiq似乎在日志中“看到”了强加的限制,但是当我观察工作人员时,这些限制被忽略了。这是日志中Sidekiq看到限制的部分:2013-04-02T05:47:19Z748TID-11ilcwDEBUG:{:queues=>["recommendvariations","recommendvariations","recommendvariations","recommendphenotypes","recommendphenotypes","recommendphenotypes","pr