草庐IT

javascript - NodeJS + Redis + WebSocket 内存管理?

coder 2023-07-19 原文

我有一个托管 WebSocket 服务器的 NodeJS。 WebSocket 重新分发来自 Redis 的消息。

完整的行是,我有一些 python 脚本在 Redis 中推送一些数据,然后 NodeJS 是 WebSocket,它将 Redis 新输入的数据读取到连接的客户端。我的问题是 NodeJs 总是占用内存,过一会儿它就会突然停止。

我不知道我的问题是什么,因为我的代码很简单。

我不需要我的 WebSocket 来接收来自已连接客户端的消息,因为我只需要向它们推送数据,而是大量数据。

var server = require('websocket').server,
    http = require('http');
var redis = require("redis"),
    client = redis.createClient();

var socket = new server({
httpServer: http.createServer().listen(443),
keepalive: false
});

client.subscribe("attack-map-production");
socket.on('request', function(request) {
var connection = request.accept(null, request.origin);

connection.on('message', function(message) {
    console.log(message);
            client.on("message", function(channel, message){
                    connection.send(message);
            });
});

connection.on('close', function(connection) {
    console.log('connection closed');
});
});

我希望在不占用服务器上所有内存的情况下完成这项工作,并可能使它更快,但我认为它已经足够快了。

也许 NodeJS 不适合这种工作?

感谢任何帮助。 谢谢。

2016-11-08 更新
使用下面提供的信息,我已经“更新”了我的代码。问题仍然存在,我将继续四处寻找答案...但我真的没有得到这个。

var server = require('websocket').server,
    http = require('http');
var redis = require("redis"),
    client = redis.createClient();


var socket = new server({
httpServer: http.createServer().listen(443),
keepalive: false
});

client.subscribe("attack-map-production");

socket.on('request', function(request) {
var connection = request.accept(null, request.origin);

    client.on("message", function(channel, message){
            connection.send(message);
    });

connection.on('close', function(connection) {
    console.log('connection closed');
});
});

2016-11-16 更新

所以这是我的新代码:

var io = require('socket.io').listen(443);
var sub = require('redis').createClient();

io.sockets.on('connection', function (sockets) {
    sockets.emit('message',{Hello: 'World!'});
    sub.subscribe('attack-map-production'); // Could be any patterni

    sockets.on('disconnect', function() {
            sub.unsubscribe('attack-map-production');
    });
});

sub.on('message', function(channel, message) {
    io.sockets.json.send(message);
});

即使是这段代码,也会让 nodejs 占用 100% 的 CPU 甚至更多,而且它开始变得非常慢,直到一切都停止。

我的数据的完整流程是一个 python 脚本将数据推送到 Redis,然后通过我的订阅,它通过 webSocket 和 Socket.io 将我的数据推送回浏览器。

就这么简单,这怎么会慢呢?我就是不明白。

最佳答案

client = redis.createClient();

看看这一行,每次调用变量 client 时,都会在 node 中创建一个 redis client 实例,并且永远不会关闭它。因此,如果您收到 10000 个套接字“请求”,您还将拥有 10000 个 redis 实例。

一旦完成对redis的写入或读取,您需要调用命令client.quit()

   var server = require('websocket').server,
    http = require('http');
var redis = require("redis"),
    client = redis.createClient();


var socket = new server({
httpServer: http.createServer().listen(443),
keepalive: false
});

client.subscribe("attack-map-production");

socket.on('request', function(request) {
var connection = request.accept(null, request.origin);

    client.on("message", function(channel, message){
            connection.send(message);
    });

client.quit();  // MISSING LINE

connection.on('close', function(connection) {
    console.log('connection closed');
});
});

我也注意到了这段代码

httpServer: http.createServer().listen(443)

端口 443 用于 https!因此,如果您使用的是安全连接,则需要调用模块 https 而不是 http,就像这样

var socket = new server({
httpServer: https.createServer().listen(443),
keepalive: false
});

希望对您有所帮助!

关于javascript - NodeJS + Redis + WebSocket 内存管理?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/40473671/

有关javascript - NodeJS + Redis + WebSocket 内存管理?的更多相关文章

  1. ruby-on-rails - Ruby net/ldap 模块中的内存泄漏 - 2

    作为我的Rails应用程序的一部分,我编写了一个小导入程序,它从我们的LDAP系统中吸取数据并将其塞入一个用户表中。不幸的是,与LDAP相关的代码在遍历我们的32K用户时泄漏了大量内存,我一直无法弄清楚如何解决这个问题。这个问题似乎在某种程度上与LDAP库有关,因为当我删除对LDAP内容的调用时,内存使用情况会很好地稳定下来。此外,不断增加的对象是Net::BER::BerIdentifiedString和Net::BER::BerIdentifiedArray,它们都是LDAP库的一部分。当我运行导入时,内存使用量最终达到超过1GB的峰值。如果问题存在,我需要找到一些方法来更正我的代

  2. ruby - i18n Assets 管理/翻译 UI - 2

    我正在使用i18n从头开始​​构建一个多语言网络应用程序,虽然我自己可以处理一大堆yml文件,但我说的语言(非常)有限,最终我想寻求外部帮助帮助。我想知道这里是否有人在使用UI插件/gem(与django上的django-rosetta不同)来处理多个翻译器,其中一些翻译器不愿意或无法处理存储库中的100多个文件,处理语言数据。谢谢&问候,安德拉斯(如果您已经在ruby​​onrails-talk上遇到了这个问题,我们深表歉意) 最佳答案 有一个rails3branchofthetolkgem在github上。您可以通过在Gemfi

  3. ruby-on-rails - 如何优雅地重启 thin + nginx? - 2

    我的瘦服务器配置了nginx,我的ROR应用程序正在它们上运行。在我发布代码更新时运行thinrestart会给我的应用程序带来一些停机时间。我试图弄清楚如何优雅地重启正在运行的Thin实例,但找不到好的解决方案。有没有人能做到这一点? 最佳答案 #Restartjustthethinserverdescribedbythatconfigsudothin-C/etc/thin/mysite.ymlrestartNginx将继续运行并代理请求。如果您将Nginx设置为使用多个上游服务器,例如server{listen80;server

  4. ruby-on-rails - Ruby 中的内存模型 - 2

    ruby如何管理内存。例如:如果我们在执行过程中采用C程序,则以下是内存模型。类似于这个ruby如何处理内存。C:__________________|||stack|||------------------||||------------------|||||Heap|||||__________________|||data|__________________|text|__________________Ruby:? 最佳答案 Ruby中没有“内存”这样的东西。Class#allocate分配一个对象并返回该对象。这就是程序

  5. ruby-on-rails - 获取 inf-ruby 以使用 ruby​​ 版本管理器 (rvm) - 2

    我安装了ruby​​版本管理器,并将RVM安装的ruby​​实现设置为默认值,这样'哪个ruby'显示'~/.rvm/ruby-1.8.6-p383/bin/ruby'但是当我在emacs中打开inf-ruby缓冲区时,它使用安装在/usr/bin中的ruby​​。有没有办法让emacs像shell一样尊重ruby​​的路径?谢谢! 最佳答案 我创建了一个emacs扩展来将rvm集成到emacs中。如果您有兴趣,可以在这里获取:http://github.com/senny/rvm.el

  6. ruby-on-rails - 事件管理员日期过滤器日期格式自定义 - 2

    是否有简单的方法来更改默认ISO格式(yyyy-mm-dd)的ActiveAdmin日期过滤器显示格式? 最佳答案 您可以像这样为日期选择器提供额外的选项,而不是覆盖js:=f.input:my_date,as::datepicker,datepicker_options:{dateFormat:"mm/dd/yy"} 关于ruby-on-rails-事件管理员日期过滤器日期格式自定义,我们在StackOverflow上找到一个类似的问题: https://s

  7. ruby - 使用 `+=` 和 `send` 方法 - 2

    如何将send与+=一起使用?a=20;a.send"+=",10undefinedmethod`+='for20:Fixnuma=20;a+=10=>30 最佳答案 恐怕你不能。+=不是方法,而是语法糖。参见http://www.ruby-doc.org/docs/ProgrammingRuby/html/tut_expressions.html它说Incommonwithmanyotherlanguages,Rubyhasasyntacticshortcut:a=a+2maybewrittenasa+=2.你能做的最好的事情是:

  8. ruby - 如何计算 Liquid 中的变量 +1 - 2

    我对如何计算通过{%assignvar=0%}赋值的变量加一完全感到困惑。这应该是最简单的任务。到目前为止,这是我尝试过的:{%assignamount=0%}{%forvariantinproduct.variants%}{%assignamount=amount+1%}{%endfor%}Amount:{{amount}}结果总是0。也许我忽略了一些明显的东西。也许有更好的方法。我想要存档的只是获取运行的迭代次数。 最佳答案 因为{{incrementamount}}将输出您的变量值并且不会影响{%assign%}定义的变量,我

  9. ruby - (Ruby || Python) 窗口管理器 - 2

    我想用这两种语言中的任何一种(最好是ruby​​)制作一个窗口管理器。老实说,除了我需要加载某种X模块外,我不知道从哪里开始。因此,如果有人有线索,如果您能指出正确的方向,那就太好了。谢谢 最佳答案 XCB,X的下一代API使用XML格式定义X协议(protocol),并使用脚本生成特定语言绑定(bind)。它在概念上与SWIG类似,只是它描述的不是CAPI,而是X协议(protocol)。目前,C和Python存在绑定(bind)。理论上,Ruby端口只是编写一个从XML协议(protocol)定义语言到Ruby的翻译器的问题。生

  10. 键删除后 ruby​​ 哈希内存泄漏 - 2

    你好,我无法成功如何在散列中删除key后释放内存。当我从哈希中删除键时,内存不会释放,也不会在手动调用GC.start后释放。当从Hash中删除键并且这些对象在某处泄漏时,这是预期的行为还是GC不释放内存?如何在Ruby中删除Hash中的键并在内存中取消分配它?例子:irb(main):001:0>`ps-orss=-p#{Process.pid}`.to_i=>4748irb(main):002:0>a={}=>{}irb(main):003:0>1000000.times{|i|a[i]="test#{i}"}=>1000000irb(main):004:0>`ps-orss=-p

随机推荐