草庐IT

mad_stream_buffer

全部标签

redis.clients.jedis.exceptions.JedisConnectionException : Unexpected end of stream

我在尝试使用Jedis客户端向Redis服务器添加一些数据时出现以下错误:Unexpectedendofstream错误。发生这种情况的原因可能是什么?redis.clients.jedis.exceptions.JedisConnectionException:Unexpectedendofstream.[info]atredis.clients.util.RedisInputStream.ensureFill(RedisInputStream.java:198)[info]atredis.clients.util.RedisInputStream.readByte(RedisInp

java - Redis Java 客户端 : Do I need to buffer my commands into a pipeline for performance?

所以我只是递增排序集中的分数。这是我使用Jedis客户端从Java应用程序运行的唯一命令,每秒大约10-30个命令。由于我只是更新分数,所以我也不关心响应。我担心的是每个ZINCRBY命令都被放入它自己的TCP数据包中,并且还在等待下一个回复,然后才允许我的线程发送下一个ZINCRBY线程。所以,我只想实现流水线来一次批处理50个命令。这是我看到代码/设计模式味道的地方:这种设计模式是否足够普遍以至于驱动程序应该处理它?看起来.net“StackExchange.redis”驱动程序会自动执行命令批处理,但Java驱动程序没有此功能吗?我的想法是制作一个自定义的Redis命令缓冲区类,

apache-spark - Azure DataBricks Stream foreach 因 NotSerializableException 而失败

我想不断详细说明数据集流的行(最初由Kafka发起):基于我想更新Radis哈希的条件。这是我的代码片段(lastContacts是前一个命令的结果,它是这种类型的流:org.apache.spark.sql.DataFrame=[serialNumber:string,lastModified:long]。这扩展为org.apache.spark.sql.Dataset[org.apache.spark.sql.Row]):classMyStreamProcessorextendsForeachWriter[Row]{overridedefopen(partitionId:Long,

java - mongoDB 和 Spark : "com.mongodb.MongoSocketReadException: Prematurely reached end of stream"

我有一个Java应用程序,它处理avro消息的Kafka流,并针对每条消息对mongoDB集合执行查询。在正确处理几十条消息后,应用程序停止运行并抛出“com.mongodb.MongoSocketReadException:过早到达流末尾”。代码如下:JavaPairInputDStreamdirectKafkaStream=KafkaUtils.createDirectStream(jsc,String.class,byte[].class,StringDecoder.class,DefaultDecoder.class,kafkaParams,topics);directKafk

mongodb - Mongodb Change Streams 未将所有更新返回到集合

我正在尝试使用ChangeStreams来查找/监控对mongo集合的更改。cursor=db.collection.watch(full_document='updateLookup')document=next(cursor)printdocument['documentKey']在使用updateMany一次更新多个文档时,我无法看到所有更改的文档。但是,如果我一次更新一个,那么我会在Stream中看到每个更改。db.collection.updateMany({"contacts.firstName":"XXXXXX"},{$set:{"LocationId":11111}})

php - 移动上传文件(...): failed to open stream: No such file or directory

我尝试使用带有临时文件夹的PHP和MySQL在我的数据库中插入图像。我使用laravel,这是我的Controller:if(isset($_FILES['img_masc'])){$img=$_FILES['img_masc']['name'];$ruta=$_FILES['img_masc']['tmp_name'];}$destino='../../../Perf_Masc/'.$img;$masc->img=$destino;//copy($ruta,$destino);move_uploaded_file($ruta,$destino);//line49这是我的观点:这是我的

MySQL - 如何将 "Using join buffer (Block Nested Loop)"添加到查询中?

当我在我的笔记本电脑上运行查询时,执行大约需要一秒钟,但在生产环境中,查询持续57秒(并且它使应用程序崩溃-这是用RubyOnRails编写的)。我用EXPLAIN运行了这个查询,发现在我的笔记本电脑上是在执行的查询中的一张表上Usingjoinbuffer(BlockNestedLoop)但这在生产中缺失(对于此表,EXTRA列中没有任何内容)。这是为什么呢?如何将Usingjoinbuffer(BlockNestedLoop)添加到生产中?谢谢编辑:这里是查询:SELECT`shippers`.`company_name`FROM`shippers`LEFTOUTERJOIN`sh

mysql - myisam_sort_buffer_size 与 sort_buffer_size

我在6GBRAM的服务器上使用MySQL。我需要知道myisam_sort_buffer_size和sort_buffer_size之间的区别是什么?我为它们设置了以下尺寸:myisam_sort_buffer_size=8M排序缓冲区大小=256M请同时说明这些值是否合适或需要调整?谢谢 最佳答案 sort_buffer_size:MySQL文档:Eachsessionthatneedstodoasortallocatesabufferofthissize.sort_buffer_sizeisnotspecifictoanysto

c# - .NET 和 MySQL 错误 - 调用 SSPI 失败 ... "message received was unexpected or badly formatted"和 "buffers supplied to a function was too small"

我希望这不是一个太模糊的问题,但我看了很远,但没能找到任何对这个错误有帮助的东西。我有一个.NET4.5.2Web服务层(使用ServiceStack和Dapper),自从我们部署该服务以来,它很少收到这两个错误。第一个错误:2017-09-2918:13:26.637+00:00[Error]Class:"TokenRepository"|Method:"GetToken"System.Security.Authentication.AuthenticationException:AcalltoSSPIfailed,seeinnerexception.--->System.Compo

mysql - 大表修复/索引和 myisam_sort_buffer_size

我有一个使用MyISAM引擎的MySQL表,它有6个INT列、1个SMALLINT、2个TINYINT和1个FLOAT列。它有数十亿行(数据文件为100GB)。我试图通过启用键在所有列上建立索引,但这从未发生过。尝试“myisamchk-rtableName”出现以下错误:-recovering(withsort)MyISAM-table'tableName'Datarecords:662929483-Fixingindex1myisamchk:error:myisam_sort_buffer_sizeistoosmallMyISAM-table'tableName'isnotfixe