草庐IT

max_task

全部标签

python - 使用 current_app.send_task 时,Celery 任务路由不起作用

我在使用current_app.send_task时遇到Celery队列路由问题我有两个worker(每个队列一个)pythonmanage.pyceleryworker-E-Qpriority--concurrency=8--loglevel=DEBUGpythonmanage.pyceleryworker-Qlow--concurrency=8-E-B--loglevel=DEBUG我在celeryconfig.py文件中定义了两个队列:#-*-coding:utf-8-*-from__future__importunicode_literalsfromdjango.core.ex

ruby-on-rails - Err max clients 达到 Redis/Sidekiq/Rails

过去3天我一直被这个问题困住,不确定现在该去哪里找。我的Rails应用程序中有一个简单的Sidekiq实现。我正在研究:Rails4.2.0、Sidekiq4.1.2、Redis3.0.6生产应用使用heroku实时运行,我有1个workerdyno和1个webdyno。问题是这样的,我不确定如何处理它或我做了什么让它这样做。当我在heroku上运行redis-cli时,我可以看到我正在运行的客户端。在任何给定时间我最多有2或3个客户端在运行。我可以用轻松杀死客户CLIENTKILLTYPEnormal所以这一切都很好,花花公子。事情变得有点棘手的部分是当我在本地启动我的服务器时,我正

ruby-on-rails - Err max clients 达到 Redis/Sidekiq/Rails

过去3天我一直被这个问题困住,不确定现在该去哪里找。我的Rails应用程序中有一个简单的Sidekiq实现。我正在研究:Rails4.2.0、Sidekiq4.1.2、Redis3.0.6生产应用使用heroku实时运行,我有1个workerdyno和1个webdyno。问题是这样的,我不确定如何处理它或我做了什么让它这样做。当我在heroku上运行redis-cli时,我可以看到我正在运行的客户端。在任何给定时间我最多有2或3个客户端在运行。我可以用轻松杀死客户CLIENTKILLTYPEnormal所以这一切都很好,花花公子。事情变得有点棘手的部分是当我在本地启动我的服务器时,我正

python - celery :错误:无法识别的参数:worker -A test_tasks -l info -c 5

我在使用Celery时遇到奇怪的错误,我正在以与30分钟前相同的方式运行它。我一直在处理项目中的多个文件,但由于某种原因突然间我得到了[virtual_assistant]cchilders:~/projects/virtual_assistant$celeryworker-Atest_tasks-linfo-c5usage:celery[-h][--auth_host_nameAUTH_HOST_NAME][--noauth_local_webserver][--auth_host_port[AUTH_HOST_PORT[AUTH_HOST_PORT...]]][--logging_

python - celery :错误:无法识别的参数:worker -A test_tasks -l info -c 5

我在使用Celery时遇到奇怪的错误,我正在以与30分钟前相同的方式运行它。我一直在处理项目中的多个文件,但由于某种原因突然间我得到了[virtual_assistant]cchilders:~/projects/virtual_assistant$celeryworker-Atest_tasks-linfo-c5usage:celery[-h][--auth_host_nameAUTH_HOST_NAME][--noauth_local_webserver][--auth_host_port[AUTH_HOST_PORT[AUTH_HOST_PORT...]]][--logging_

安装es报错: max virtual memory areas vm.max_map_count [65530] is too low, increase to at least [262144]

启动es时报错maxvirtualmemoryareasvm.max_map_count[65530]istoolow,increasetoatleast[262144]解决:原因:最大虚拟内存值设置过小,无法支持ElasticSearch的运行。将vm.max_map_count的值改为262144,重新启动即可解决问题。[root@log1~]#vim/etc/sysctl.confvm.max_map_count=262144[root@log1~]#sysctl-p#使之生效vm.max_map_count=262144[root@log1~]#cat/proc/sys/vm/max_

带 celery 的 django-socketio : send to socket after async task completes in separate process

如何在我的主要Django应用程序进程中访问Celery任务的结果?或者,如何从单独的进程发布到现有套接字连接?我有一个用户可以收到分数的应用程序。当记录分数时,会进行计算(目标进展等),并根据这些计算向感兴趣的用户发送通知。计算可能需要30秒以上,因此为了避免UI缓慢,这些操作通过Celery任务在后台进程中执行,由我的Score模型的post_save信号调用。理想情况下,我的Nofication模型上的post_save信号会向订阅的客户端发布消息(我正在使用django-socketio,gevent-socketio的包装器)。这看起来很简单......创建乐谱在后台进程中对

带 celery 的 django-socketio : send to socket after async task completes in separate process

如何在我的主要Django应用程序进程中访问Celery任务的结果?或者,如何从单独的进程发布到现有套接字连接?我有一个用户可以收到分数的应用程序。当记录分数时,会进行计算(目标进展等),并根据这些计算向感兴趣的用户发送通知。计算可能需要30秒以上,因此为了避免UI缓慢,这些操作通过Celery任务在后台进程中执行,由我的Score模型的post_save信号调用。理想情况下,我的Nofication模型上的post_save信号会向订阅的客户端发布消息(我正在使用django-socketio,gevent-socketio的包装器)。这看起来很简单......创建乐谱在后台进程中对

redis - 我应该如何处理 celery Tasks 中的 redis 连接?

我有一个celery服务器,可以为我的应用程序处理一些计数器classIncrementStatsCounterTask(Task):defrun(self,count,shortcode,stat_type,operator_id,date,**kwargs):r_server=redis.Redis(settings.REDIS_HOST)key=key_mask%{'shortcode':shortcode,'stat_type':stat_type,'operator_id':operator_id,'date':date.strftime('%Y%m%d')}returnke

redis - 我应该如何处理 celery Tasks 中的 redis 连接?

我有一个celery服务器,可以为我的应用程序处理一些计数器classIncrementStatsCounterTask(Task):defrun(self,count,shortcode,stat_type,operator_id,date,**kwargs):r_server=redis.Redis(settings.REDIS_HOST)key=key_mask%{'shortcode':shortcode,'stat_type':stat_type,'operator_id':operator_id,'date':date.strftime('%Y%m%d')}returnke