2022-06-27 10:01:17.501 ERROR 1 --- [nio-5010-exec-7] o.a.c.c.C.[.[.[/].[dispatcherServlet] : Servlet.service() for servlet [dispatcherServlet] in context with path [] threw exception [Request processing failed; nested exception is com.alibaba.excel.exception.ExcelGenerateException: Can not close IO.] with root cause
java.io.IOException: Broken pipe
at java.base/sun.nio.ch.FileDispatcherImpl.write0(Native Method) ~[na:na]
at java.base/sun.nio.ch.SocketDispatcher.write(SocketDispatcher.java:62) ~[na:na]
at java.base/sun.nio.ch.IOUtil.writeFromNativeBuffer(IOUtil.java:113) ~[na:na]
at java.base/sun.nio.ch.IOUtil.write(IOUtil.java:79) ~[na:na]
at java.base/sun.nio.ch.IOUtil.write(IOUtil.java:50) ~[na:na]
at java.base/sun.nio.ch.SocketChannelImpl.write(SocketChannelImpl.java:532) ~[na:na]
at org.apache.tomcat.util.net.NioChannel.write(NioChannel.java:135) ~[tomcat-embed-core-9.0.54.jar:9.0.54]
at org.apache.tomcat.util.net.NioEndpoint$NioSocketWrapper.doWrite(NioEndpoint.java:1363) ~[tomcat-embed-core-9.0.54.jar:9.0.54]
at org.apache.tomcat.util.net.SocketWrapperBase.doWrite(SocketWrapperBase.java:766) ~[tomcat-embed-core-9.0.54.jar:9.0.54]
at org.apache.tomcat.util.net.SocketWrapperBase.writeBlocking(SocketWrapperBase.java:586) ~[tomcat-embed-core-9.0.54.jar:9.0.54]
at org.apache.tomcat.util.net.SocketWrapperBase.write(SocketWrapperBase.java:530) ~[tomcat-embed-core-9.0.54.jar:9.0.54]
at org.apache.coyote.http11.Http11OutputBuffer$SocketOutputBuffer.doWrite(Http11OutputBuffer.java:547) ~[tomcat-embed-core-9.0.54.jar:9.0.54]
at org.apache.coyote.http11.filters.ChunkedOutputFilter.doWrite(ChunkedOutputFilter.java:110) ~[tomcat-embed-core-9.0.54.jar:9.0.54]
at org.apache.coyote.http11.Http11OutputBuffer.doWrite(Http11OutputBuffer.java:194) ~[tomcat-embed-core-9.0.54.jar:9.0.54]
at org.apache.coyote.Response.doWrite(Response.java:615) ~[tomcat-embed-core-9.0.54.jar:9.0.54]
at org.apache.catalina.connector.OutputBuffer.realWriteBytes(OutputBuffer.java:340) ~[tomcat-embed-core-9.0.54.
简单来说,Broken Pipe 意味着一台机器正在尝试从管道读取数据或向管道写入数据,而管道另一端的机器已经死亡或终止。现在,由于连接已关闭,应建立新连接以进一步传输数据,否则数据传输将停止。
此问题的最常见原因之一是客户端在执行任何操作(如加载页面或下载附件)时关闭打开的连接。当使用 Nginx 之类的代理/负载均衡器(例如关闭 Web 浏览器甚至简单地取消下载)或连接速度很慢时,强制关闭某些连接也会发生这种情况。
一个简单的场景:浏览器向服务器请求资源,作为响应,服务器向浏览器返回响应。如果在服务器向浏览器发送响应时用户关闭了浏览器怎么办?服务器与浏览器之间的连接意外关闭。然后这会导致 Broken Pipe,该异常被称为 java.io.IOException: Broken Pipe in Java。
这也可能发生在任何中断客户端和服务器之间连接的事情上,包括性能问题甚至网络间歇性问题。
并非每个 Broken Pipe 异常都是开发人员的错
由于Broken Pipe的主要原因之一是用户的行为(在服务器完成发送响应之前意外关闭活动浏览器会话),最终用户数量的增加增加了Broken Pipe的机会。
来自服务器的重响应需要大量时间才能传输到客户端,而这个巨大的时间跨度可能是 Broken Pipe 的情况。
如果 Web 服务器在等于服务器设置的超时值的特定时间内无法得到服务的响应,它会关闭与客户端的连接,返回 503: Gateway Timeout 并因此导致 Broken Pipe。
公平地说,这不是一个危险信号,因为它很大程度上是由用户的正常行为引起的,并且总是有可能由于某些故障而关闭服务。但是,如果服务器一次运行在相对大量的用户请求上,那么不仅是 Broken Pipe,而且任何异常似乎都会造成问题。
在我的例子中,由于高网络流量,日志被损坏的管道异常淹没。因为,写入文件(I/O 操作)是服务器执行的昂贵操作之一,想象一下服务器被与 Broken Pipe 相关的异常淹没,并且服务器必须投入大量资源才能将该异常堆栈跟踪写入日志文件。这导致服务器响应缓慢并使其迟缓。
在这一点上,我意识到,当扩展到大流量时,YES BROKEN PIPE EXCEPTION 是一个红色信号。
处理或移除破损管道的挑战
该系统使用 Wildfly 10.1 作为应用程序服务器,并在 JavaEE 7 上编写。处理这种情况对我来说不是小菜一碟,因为:
在本地或 QA 环境中复制此异常需要正确对齐所有行星(开个玩笑),但是是的,这太难了。
在 Java 中处理异常很容易,只要在 catch 块中捕获异常即可。未处理异常的性质:java.io.IOException: Broken pipe 是这样的,它从 Wildfly 容器中引发并在堆栈跟踪中注销,而不是被困在 catch 块中。现在,想象一下必须处理无法从代码中捕获的异常。天哪!!!!
您永远不会知道,哪个请求引发了问题,因为服务器收到大量请求,其中任何一个都可能是异常的原因。将日志与套接字端点一起添加到每个 REST 端点是不可行的。
修复 java.io.IOException : Broken Pipe
最后,经过这么多断章取义的谈话,这里是主要部分(希望它值得等待)。
从系统中删除异常的两种方法是:
调查异常的根本原因,并消除它。
使用适当的日志记录或某些操作来优雅地处理异常。
消除根本原因
要求用户不要意外关闭连接
这是不可能的,看在上帝的份上
这在某种程度上是可以实现的,但是在遗留系统中,对大量数据进行操作,重写所有逻辑以使 api 响应不重也不在所有情况下都是可行的。
Nginx 有一个名为proxy_read_timeout的变量,它的默认值为 60s,增加这个值也会最大限度地减少 Broken Pipe 的机会。
即使在消除了在这种情况下本身很难检测到的确切根本原因之后,我们也不能完全排除断管的存在。我们可以吗?
因此,下一个解决方案是优雅地处理 Broken Pipe。
抑制来自 logger 本身的日志 如果您使用 log4j 作为日志管理器,将以下配置添加到 log4j.properties 将有助于摆脱由于 Broken Pipe 导致的异常泛滥日志。
log4j.logger.org.apache.catalina.connector.ClientAbortException = ERROR, console, cloudAppender
log4j.additivity.org.apache.catalina.connector.ClientAbortException = false
在 Wildfly 中升级 Resteasy 我们使用 JAX-RS 的 Resteasy 实现在 Java 中实现 REST,Resteasy v3.0.19 与 Wildfly 10.1 捆绑在一起。希望能在 resteasy 本身中找到一些修复,我开始深入研究 Resteasy 的发行说明,发现在 Resteasy-Client v3.1.1 之后,可以从代码中捕获 Unhandled Exception: java.io.IOException,不像容器暴露它直接进入logtrace。因此,Resteasy Client 的升级版本允许我们通过 Global Exception Handler 来处理异常(后面会介绍)。
在 Wildfly 中升级 Resteasy 的步骤
的位置: Resteasy 分发 jar 的位置位于:
WILDFLY_HOME/modules/system/layers/base/org/jboss/resteasy/resteasy-jaxrs/main
文件名:resteasy-jaxrs-3.0.19 .Final.jar
从Resteasy 下载处下载resteasy 目标版本(3.1.1 及以上)的 zip 文件
在临时目录中解压文件。它里面还有另外两个 zip 文件:
resteasy-jboss-modules-3.1.1.Final-mavenized.zip和
resteasy-jboss-modules-3.1.1.Final.zip
在以下位置解压缩两个 .zip 文件:
WILDFLY_HOME/modules/system/layers/base
在pom.xml中更新 resteasy 依赖项的版本
<dependency>
<groupId>org.jboss.resteasy</groupId>
<artifactId>resteasy-jaxrs</artifactId>
<version>3.1.1.Final</version>
<scope>provided</scope>
</dependency>
使用 Global Exception Handler 我进一步从 java 代码本身添加了 Generic Exception Mapper,以捕获和处理 Broken Pipe。
我的最终方法
虽然我已经收集了多种技术来解决这个问题,但以下是我实际实现的东西:
将 Wildfly 升级到 v11.0,因为它自动附带了 Resteasy v3.1.1(我真正想要的版本)捆绑在其中。
通过 Global Exception Handler 处理异常
有了这个,Broken Pipe 的问题现在只存在于旧的日志档案中.
参考文献:https://dev.to/bishwapoudel/how-i-fixed-java-io-ioexception-broken-pipe-in-java-wildfly-10-1-86k
我想为Heroku构建一个Rails3应用程序。他们使用Postgres作为他们的数据库,所以我通过MacPorts安装了postgres9.0。现在我需要一个postgresgem并且共识是出于性能原因你想要pggem。但是我对我得到的错误感到非常困惑当我尝试在rvm下通过geminstall安装pg时。我已经非常明确地指定了所有postgres目录的位置可以找到但仍然无法完成安装:$envARCHFLAGS='-archx86_64'geminstallpg--\--with-pg-config=/opt/local/var/db/postgresql90/defaultdb/po
尝试通过RVM将RubyGems升级到版本1.8.10并出现此错误:$rvmrubygemslatestRemovingoldRubygemsfiles...Installingrubygems-1.8.10forruby-1.9.2-p180...ERROR:Errorrunning'GEM_PATH="/Users/foo/.rvm/gems/ruby-1.9.2-p180:/Users/foo/.rvm/gems/ruby-1.9.2-p180@global:/Users/foo/.rvm/gems/ruby-1.9.2-p180:/Users/foo/.rvm/gems/rub
我的最终目标是安装当前版本的RubyonRails。我在OSXMountainLion上运行。到目前为止,这是我的过程:已安装的RVM$\curl-Lhttps://get.rvm.io|bash-sstable检查已知(我假设已批准)安装$rvmlistknown我看到当前的稳定版本可用[ruby-]2.0.0[-p247]输入命令安装$rvminstall2.0.0-p247注意:我也试过这些安装命令$rvminstallruby-2.0.0-p247$rvminstallruby=2.0.0-p247我很快就无处可去了。结果:$rvminstall2.0.0-p247Search
由于fast-stemmer的问题,我很难安装我想要的任何rubygem。我把我得到的错误放在下面。Buildingnativeextensions.Thiscouldtakeawhile...ERROR:Errorinstallingfast-stemmer:ERROR:Failedtobuildgemnativeextension./System/Library/Frameworks/Ruby.framework/Versions/2.0/usr/bin/rubyextconf.rbcreatingMakefilemake"DESTDIR="cleanmake"DESTDIR=
当我尝试安装Ruby时遇到此错误。我试过查看this和this但无济于事➜~brewinstallrubyWarning:YouareusingOSX10.12.Wedonotprovidesupportforthispre-releaseversion.Youmayencounterbuildfailuresorotherbreakages.Pleasecreatepull-requestsinsteadoffilingissues.==>Installingdependenciesforruby:readline,libyaml,makedepend==>Installingrub
我正在尝试使用boilerpipe来自JRuby。我看过guide从JRuby调用Java,并成功地将它与另一个Java包一起使用,但无法弄清楚为什么同样的东西不能用于boilerpipe。我正在尝试基本上从JRuby中执行与此Java等效的操作:URLurl=newURL("http://www.example.com/some-location/index.html");Stringtext=ArticleExtractor.INSTANCE.getText(url);在JRuby中试过这个:require'java'url=java.net.URL.new("http://www
我意识到这可能是一个非常基本的问题,但我现在已经花了几天时间回过头来解决这个问题,但出于某种原因,Google就是没有帮助我。(我认为部分问题在于我是一个初学者,我不知道该问什么......)我也看过O'Reilly的RubyCookbook和RailsAPI,但我仍然停留在这个问题上.我找到了一些关于多态关系的信息,但它似乎不是我需要的(尽管如果我错了请告诉我)。我正在尝试调整MichaelHartl'stutorial创建一个包含用户、文章和评论的博客应用程序(不使用脚手架)。我希望评论既属于用户又属于文章。我的主要问题是:我不知道如何将当前文章的ID放入评论Controller。
相信很多人在录制视频的时候都会遇到各种各样的问题,比如录制的视频没有声音。屏幕录制为什么没声音?今天小编就和大家分享一下如何录制音画同步视频的具体操作方法。如果你有录制的视频没有声音,你可以试试这个方法。 一、检查是否打开电脑系统声音相信很多小伙伴在录制视频后会发现录制的视频没有声音,屏幕录制为什么没声音?如果当时没有打开音频录制,则录制好的视频是没有声音的。因此,建议在录制前进行检查。屏幕上没有声音,很可能是因为你的电脑系统的声音被禁止了。您只需打开电脑系统的声音,即可录制音频和图画同步视频。操作方法:步骤1:点击电脑屏幕右下侧的“小喇叭”图案,在上方的选项中,选择“声音”。 步骤2:在“声
首先回顾一下拉格朗日定理的内容:函数f(x)是在闭区间[a,b]上连续、开区间(a,b)上可导的函数,那么至少存在一个,使得:通过这个表达式我们可以知道,f(x)是函数的主体,a和b可以看作是主体函数f(x)中所取的两个值。那么可以有, 也就意味着我们可以用来替换 这种替换可以用在求某些多项式差的极限中。方法: 外层函数f(x)是一致的,并且h(x)和g(x)是等价无穷小。此时,利用拉格朗日定理,将原式替换为 ,再进行求解,往往会省去复合函数求极限的很多麻烦。使用要注意:1.要先找到主体函数f(x),即外层函数必须相同。2.f(x)找到后,复合部分是等价无穷小。3.要满足作差的形式。如果是加
SPI接收数据左移一位问题目录SPI接收数据左移一位问题一、问题描述二、问题分析三、探究原理四、经验总结最近在工作在学习调试SPI的过程中遇到一个问题——接收数据整体向左移了一位(1bit)。SPI数据收发是数据交换,因此接收数据时从第二个字节开始才是有效数据,也就是数据整体向右移一个字节(1byte)。请教前辈之后也没有得到解决,通过在网上查阅前人经验终于解决问题,所以写一个避坑经验总结。实际背景:MCU与一款芯片使用spi通信,MCU作为主机,芯片作为从机。这款芯片采用的是它规定的六线SPI,多了两根线:RDY和INT,这样从机就可以主动请求主机给主机发送数据了。一、问题描述根据从机芯片手