1Shuffle的核心要点1.1ShuffleMapStage与ResultStage图ShuffleMapStage与ResultStage在划分stage时，最后一个stage称为finalStage，它本质上是一个ResultStage对象，前面的所有stage被称为ShuffleMapStage。ShuffleMapStage的结束伴随着shuffle文件的写磁盘。ResultStage基本上对应代码中的action算子，即将一个函数应用在RDD的各个partition的数据集上，意味着一个job的运行结束。1.2Shuffle中的任务个数我们知道，SparkShuffle分为map阶
1Shuffle的核心要点1.1ShuffleMapStage与ResultStage图ShuffleMapStage与ResultStage在划分stage时，最后一个stage称为finalStage，它本质上是一个ResultStage对象，前面的所有stage被称为ShuffleMapStage。ShuffleMapStage的结束伴随着shuffle文件的写磁盘。ResultStage基本上对应代码中的action算子，即将一个函数应用在RDD的各个partition的数据集上，意味着一个job的运行结束。1.2Shuffle中的任务个数我们知道，SparkShuffle分为map阶
捕获组分为：普通捕获组(Expression)命名捕获组(?Expression)普通捕获组从正则表达式左侧开始，每出现一个左括号"("记做一个分组，分组编号从1开始。0代表整个表达式。对于时间字符串：2017-04-25，表达式如下(\\d{4})-((\\d{2})-(\\d{2}))有4个左括号，所以有4个分组:编号捕获组匹配0(\d{4})-((\d{2})-(\d{2}))2017-04-251(\d{4})20172((\d{2})-(\d{2}))04-253(\d{2})044(\d{2})25publicstaticfinalStringDATE_STRING="2017-0
捕获组分为：普通捕获组(Expression)命名捕获组(?Expression)普通捕获组从正则表达式左侧开始，每出现一个左括号"("记做一个分组，分组编号从1开始。0代表整个表达式。对于时间字符串：2017-04-25，表达式如下(\\d{4})-((\\d{2})-(\\d{2}))有4个左括号，所以有4个分组:编号捕获组匹配0(\d{4})-((\d{2})-(\d{2}))2017-04-251(\d{4})20172((\d{2})-(\d{2}))04-253(\d{2})044(\d{2})25publicstaticfinalStringDATE_STRING="2017-0
