草庐IT

使用Hadoop patch包修复的一次经历

原因:因为公司的平台的数据量在30P左右,使用了Hadoop3.1.2的版本,而且使用的纠删码功能,报错信息如下:java.io.IOException:UnexpectedEOSfromthereaderatorg.apache.hadoop.hdfs.StripeReader.readToBuffer(StripeReader.java:241)atorg.apache.hadoop.hdfs.StripeReader.lambda$readCells$0(StripeReader.java:281)atjava.util.concurrent.FutureTask.run(FutureT

使用Hadoop patch包修复的一次经历

原因:因为公司的平台的数据量在30P左右,使用了Hadoop3.1.2的版本,而且使用的纠删码功能,报错信息如下:java.io.IOException:UnexpectedEOSfromthereaderatorg.apache.hadoop.hdfs.StripeReader.readToBuffer(StripeReader.java:241)atorg.apache.hadoop.hdfs.StripeReader.lambda$readCells$0(StripeReader.java:281)atjava.util.concurrent.FutureTask.run(FutureT