我有一个在MapReduce模式下运行的Pig脚本,该脚本一直收到我无法修复的持续错误。该脚本生成多个MapReduce应用程序;运行几个小时后,其中一个应用程序注册为SUCCEEDED但返回以下诊断消息:Wecrashedaftersuccessfullycommitting.Recovering.导致失败的步骤是尝试对大约100GB的数据集执行RANK,从之前的脚本中拆分大约1000个mapreduce输出文件。但是对于其他试图执行大型HASH_JOIN操作的脚本,我也收到了同样的错误。深入研究日志,我发现了以下内容,这似乎也表明作业成功但随后收到错误结束:INFO[AsyncDi