本文将介绍如何使用idea搭建Hadoop源码阅读环境。（默认已安装好Java、Maven环境）一、搭建源码阅读环境一）idea导入hadoop工程从github上拉取代码。https://github.com/apache/hadoop可以选择对应的分支#如拉取2.8.5分支gitclone-bbranch-2.8.5git@github.com:apache/hadoop.git在idea中点击File-Open选择对应的文件夹目录，进行导入。之后会进入漫长的程序加载过程（看机器配置和网速，可能几十分钟到几小时不等）。二）配置注释环境为了更方便的在阅读源码过程中记笔记，可在源码基础上创建新
yarn由于yarn的全局安装位置与npm不同，所以要配置yarn的全局安装路径到环境变量中，否则全局安装的包不起作用具体操作如下咱装yarn分别执行yarnglobal命令，yarnglobalbir命令将上述两步返回路径配置到电脑环境中变变量中即可 xxxx表示要安装的东西比如yarnaddjquery yarn命令//初始化项目yarninit-y//下载项目的所有声明的依赖yarn//下载指定运行时依赖包yarnaddxxx@3.2.1//下载指定的开发时依赖yarnaddxxxxx@3.2.1-D//全局下载指定包yarnglobaladdxxxxx//删除依赖包yarnremove
yarn由于yarn的全局安装位置与npm不同，所以要配置yarn的全局安装路径到环境变量中，否则全局安装的包不起作用具体操作如下咱装yarn分别执行yarnglobal命令，yarnglobalbir命令将上述两步返回路径配置到电脑环境中变变量中即可 xxxx表示要安装的东西比如yarnaddjquery yarn命令//初始化项目yarninit-y//下载项目的所有声明的依赖yarn//下载指定运行时依赖包yarnaddxxx@3.2.1//下载指定的开发时依赖yarnaddxxxxx@3.2.1-D//全局下载指定包yarnglobaladdxxxxx//删除依赖包yarnremove
熟悉一个新项目一般都是如下步骤：gitclonexxxnpminstallnpmrundev或者gitclonexxxyarnyarnstartyarn是什么？yarn是由Facebook、Google、Exponent和Tilde联合推出了一个新的JS包管理工具，yarn是为了弥补npm的一些缺陷而出现的npm的缺陷：npminstall的时候巨慢，新的项目拉下来要等半天同一个项目，安装的时候无法保持一致性。由于package.json文件中依赖包版本号的特点，有时会由于安装版本不一致出现bug安装的时候，包会在同一时间下载和安装，中途某个时候，一个包抛出了一个错误，但是npm会继续下载和安
熟悉一个新项目一般都是如下步骤：gitclonexxxnpminstallnpmrundev或者gitclonexxxyarnyarnstartyarn是什么？yarn是由Facebook、Google、Exponent和Tilde联合推出了一个新的JS包管理工具，yarn是为了弥补npm的一些缺陷而出现的npm的缺陷：npminstall的时候巨慢，新的项目拉下来要等半天同一个项目，安装的时候无法保持一致性。由于package.json文件中依赖包版本号的特点，有时会由于安装版本不一致出现bug安装的时候，包会在同一时间下载和安装，中途某个时候，一个包抛出了一个错误，但是npm会继续下载和安
本篇文章讲述FlinkApplicationOnYarn提交模式下，从命令提交到AM容器创建1、脚本入口flinkrun-application-tyarn-applicationhdfs:///TopSpeedWindowing.jar以上是flinkapplication模式的任务提交命令，可以发现，任务提交入口在FLINK_HOME/bin目录中的flink脚本中 根据flink脚本中的执行操作，可发现flink脚本最终指向了 org.apache.flink.client.cli.CliFrontend这个入口类 2、flink程序入口类org.apache.flink.clien
本篇文章讲述FlinkApplicationOnYarn提交模式下，从命令提交到AM容器创建1、脚本入口flinkrun-application-tyarn-applicationhdfs:///TopSpeedWindowing.jar以上是flinkapplication模式的任务提交命令，可以发现，任务提交入口在FLINK_HOME/bin目录中的flink脚本中 根据flink脚本中的执行操作，可发现flink脚本最终指向了 org.apache.flink.client.cli.CliFrontend这个入口类 2、flink程序入口类org.apache.flink.clien
一、Yarn产生的背景Hadoop2之前是由HDFS和MR组成的，HDFS负责存储，MR负责计算。一）MRv1的问题耦合度高：MR中的jobTracker同时负责资源管理和作业控制两个功能，互相制约。可靠性差：管理节点是单机的，有单点故障的问题。资源利用率低：基于slot的资源分配模型。机器会将资源划分成若干相同大小的slot，并划定哪些是mapslot、哪些是reduceslot。无法支持多种计算框架：限定了只能用于MapReduce程序。二）Yarn的诞生由于之前Hadoop资源调度的种种问题，新的资源调度框架产生了——YARN（YetAnotherResourceNegotiator）。
一、Yarn产生的背景Hadoop2之前是由HDFS和MR组成的，HDFS负责存储，MR负责计算。一）MRv1的问题耦合度高：MR中的jobTracker同时负责资源管理和作业控制两个功能，互相制约。可靠性差：管理节点是单机的，有单点故障的问题。资源利用率低：基于slot的资源分配模型。机器会将资源划分成若干相同大小的slot，并划定哪些是mapslot、哪些是reduceslot。无法支持多种计算框架：限定了只能用于MapReduce程序。二）Yarn的诞生由于之前Hadoop资源调度的种种问题，新的资源调度框架产生了——YARN（YetAnotherResourceNegotiator）。
一、前言因为最近练习Vue3项目的时候，发现Chrome浏览器的devtools插件不起作用了，这才想起当前安装的devtools是5版本的，而Vue3项目需要6版本才支持。二、安装1.在Github上搜索devtools项目，直达车2.找到devtools项目tags的6.0版本以上的的beta版本，下载到本地3.解压后，用编辑器打开，因为这个项目是用yarn管理的，而我本地没有安装yarn，因此需要安装yarn工具,如果不了解yarn的推荐看这里npminstall-gyarn4.执行yarninstall下载项目依赖，这里如果不成功的话，推荐使用淘宝镜像5.执行yarnrunbuild打
