草庐IT

perform_async

全部标签

performance - redis批量插入时读取redis

我有一台全天候运行的服务器,使用Redis作为数据存储。每天在特定时间(凌晨3点)有一次巨大的数据更新(近1000万行),其他时间更新的数据很多(近100行)。我选择redismassinsertion方式加速数据插入,耗时30秒。但是那个时候redis的查询性能真的很差。有什么办法可以避免这个问题吗?如果我用redis主从模式,读写分离,主写,从读。但是当master批量插入时,也有大量数据需要同步到slave,怀疑还是slaveredis查询的热点。对这种senario有什么建议吗?谢谢。 最佳答案 首先,我会调查瓶颈在哪里。是

performance - 如何识别 Redis 性能/瓶颈

我想知道如何检查Redis服务器的性能以及什么可能是瓶颈。我运行了redis-cli-h127.0.0.1-p6379--stat命令并获得了以下统计信息。如果有人可以建议需要做什么以及需要检查哪些其他指标。 最佳答案 Redis包含redis-benchmark实用程序,它模拟N个客户端同时执行的运行命令Usage:redis-benchmark[-h][-p][-c][-n[-k]MONITOR是一个调试命令,它流回Redis服务器处理的每个命令。它可以帮助理解数据库发生了什么。此命令既可以通过redis-cli也可以通过tel

performance - 如何识别 Redis 性能/瓶颈

我想知道如何检查Redis服务器的性能以及什么可能是瓶颈。我运行了redis-cli-h127.0.0.1-p6379--stat命令并获得了以下统计信息。如果有人可以建议需要做什么以及需要检查哪些其他指标。 最佳答案 Redis包含redis-benchmark实用程序,它模拟N个客户端同时执行的运行命令Usage:redis-benchmark[-h][-p][-c][-n[-k]MONITOR是一个调试命令,它流回Redis服务器处理的每个命令。它可以帮助理解数据库发生了什么。此命令既可以通过redis-cli也可以通过tel

caching - Azure Redis 缓存 - 多个错误 TimeoutException : Timeout performing GET {key}

我们将应用程序部署到Azure。它正在使用AzureRedis缓存,我们遇到了很多超时。即:[TimeoutException:TimeoutperformingGETtextobjectDetails__23290_TextObject,inst:1,mgr:Inactive,queue:5,qu=0,qs=5,qc=0,wr=0/0,in=56864/0][TimeoutException:TimeoutperformingGETfeatured_series_CachedSeries,inst:1,mgr:Inactive,queue:4,qu=0,qs=4,qc=0,wr=0/

caching - Azure Redis 缓存 - 多个错误 TimeoutException : Timeout performing GET {key}

我们将应用程序部署到Azure。它正在使用AzureRedis缓存,我们遇到了很多超时。即:[TimeoutException:TimeoutperformingGETtextobjectDetails__23290_TextObject,inst:1,mgr:Inactive,queue:5,qu=0,qs=5,qc=0,wr=0/0,in=56864/0][TimeoutException:TimeoutperformingGETfeatured_series_CachedSeries,inst:1,mgr:Inactive,queue:4,qu=0,qs=4,qc=0,wr=0/

ruby-on-rails - 使用 devise-async 发送电子邮件不起作用 (Rails/Sidekiq)

我有sidekiq(2.15.2)、devise(3.2.0)和devise-async(0.9.0)Rails应用程序。我正在尝试让devise-async接管发送电子邮件。但没有运气。我关注了instructions像这样:将:async添加到User模型:#models/user.rbclassUserincludeMongoid::Documentdevise:database_authenticatable,:registerable,:recoverable,:rememberable,:trackable,:validatable,:confirmable,:asynce

ruby-on-rails - 使用 devise-async 发送电子邮件不起作用 (Rails/Sidekiq)

我有sidekiq(2.15.2)、devise(3.2.0)和devise-async(0.9.0)Rails应用程序。我正在尝试让devise-async接管发送电子邮件。但没有运气。我关注了instructions像这样:将:async添加到User模型:#models/user.rbclassUserincludeMongoid::Documentdevise:database_authenticatable,:registerable,:recoverable,:rememberable,:trackable,:validatable,:confirmable,:asynce

python - Celery - 使用 apply_async 添加 7000 个任务需要 12 秒

我正在使用Celery将任务分发到多个服务器。出于某种原因,将7,000个任务添加到队列中非常慢,而且似乎是CPU受限的。执行下面的代码需要12秒,这只是将任务添加到队列中。start=time.time()forurlinurls:fetch_url.apply_async((url.strip(),),queue='fetch_url_queue')printtime.time()-start在broker之间切换(试过redis、RabbitMQ、pyamqp)并没有太大的影响。减少工作人员的数量(每个工作人员都在自己的服务器上运行,与添加任务的主服务器分开)没有任何显着影响。传

python - Celery - 使用 apply_async 添加 7000 个任务需要 12 秒

我正在使用Celery将任务分发到多个服务器。出于某种原因,将7,000个任务添加到队列中非常慢,而且似乎是CPU受限的。执行下面的代码需要12秒,这只是将任务添加到队列中。start=time.time()forurlinurls:fetch_url.apply_async((url.strip(),),queue='fetch_url_queue')printtime.time()-start在broker之间切换(试过redis、RabbitMQ、pyamqp)并没有太大的影响。减少工作人员的数量(每个工作人员都在自己的服务器上运行,与添加任务的主服务器分开)没有任何显着影响。传

performance - redis (StackExchange.Redis) 发布性能差?

我正在尝试使用Redis发布/订阅在应用程序之间高速传输数据(每秒25000条消息)。我已经测试如下:拓扑:1个发布者、1个订阅者和Redis服务器。所有都托管在同一台电脑上。电脑硬件:CPU:Intel(R)Core(TM)I7-4578UCPU@3.00GHz内存:16.0GB代码:Stopwatchsw=newStopwatch();sw.Start();while(_started){//db.PublishAsync(RawMessagesCapturedMsg.TopicGroupName,redisValue);db.Publish(RawMessagesCaptured