选择题1.spark的四大组件下面哪个不是(D)A.SparkStreamingBMlibCGraphxDSparkR2.下面哪个端口不是spark自带服务的端口(C)A.8080B.4040C.8090D.180803.spark1.4版本的最大变化(B)AsparksqlRelease版本B引入SparkRCDataFrameD支持动态资源分配4.SparkJob默认的调度模式(A)AFIFOBFAIRC无D运行时指定5.哪个不是本地模式运行的条件(D)Aspark.localExecution.enabled=trueB显式指定本地运行CfinalStage无父StageDpartiti
今天的路劲问题，思想和昨天的爬楼梯一样，主要还是找到你这个位置是怎么来的，到达dp[i][j]的方法由到达dp[i-1][j]的方法再加上到达dp[i][j-1]的方法和。在初始化时，当i=0或者j=0时，到达他们的只有一条路劲，就是直走，所以对它进行初始化。63.不同路径II加了一个障碍物进去，加障碍物进去后，其实就是多了一个条件，就是到达这个点的方法为0，所以在原来的基础上加上如果遇到障碍物，那么dp[i][j]就等于0，加上这个条件就可以了。具体直接看代码：62. 不同路径一个机器人位于一个 mxn 网格的左上角（起始点在下图中标记为“Start”）。机器人每次只能向下或者向右移动一步。
spark3.3.1CDH打包因为CDH在6.3.2之后开始收费，而自带的spark版本太低，还阉割了spark-sql功能。所以我们直接外挂spark3.3.1，使用CDH6.3.2相关的hadooplib。下载相关组件wgethttps://archive.apache.org/dist/maven/maven-3/3.8.6/source/apache-maven-3.8.6-src.tar.gzwgethttps://archive.apache.org/dist/spark/spark-3.3.1/spark-3.3.1.tgzmvspark-3.3.1.tgzapache-mave
目录一、什么是对象数组？二、对象数组的作用： 三、对象数组的语法定义及动静初始化：语法定义：静态初始化：在定义数组的同时对数组元素进行初始化 动态初始化：使用运算符new为数组分配空间 四、对象数组案例演示：案例需求： 具体实现代码：一、什么是对象数组？解析：1.顾名思义就是当数组元素是类对象时，这样的数组称之为对象数组，在这种情况下，数组的每一个元素都是一个对象的引用。2.对象数组，就是指包含了一组相关的对象。二、对象数组的作用： 解析：1.数组就是一个容器，当创建了多个相同的类对象时，并且需要将这些类对象储存时，这个时候对象数组的作用就体现出来了。2.通俗的说就是用来存多个对象的数组，将对
目录一、什么是对象数组？二、对象数组的作用： 三、对象数组的语法定义及动静初始化：语法定义：静态初始化：在定义数组的同时对数组元素进行初始化 动态初始化：使用运算符new为数组分配空间 四、对象数组案例演示：案例需求： 具体实现代码：一、什么是对象数组？解析：1.顾名思义就是当数组元素是类对象时，这样的数组称之为对象数组，在这种情况下，数组的每一个元素都是一个对象的引用。2.对象数组，就是指包含了一组相关的对象。二、对象数组的作用： 解析：1.数组就是一个容器，当创建了多个相同的类对象时，并且需要将这些类对象储存时，这个时候对象数组的作用就体现出来了。2.通俗的说就是用来存多个对象的数组，将对
.2广播与广播域：广播：将广播地址作为目的地址的数据帧广播域：网络中能接收到同一个广播所有结点的集合广播域越小越好，因为假如有五千个人同时都在说话，就听不清说的什么，要是只有五个人的广播域中有五个人在说话还是有可能听得清的。MAC地址广播：FF-FF-FF-FF-FF-FFIP地址广播：1.255.255.255.2552.广播IP地址为IP网段的广播地址，比如192.168.1.255/24交换机隔离不了广播域，路由器可以隔离广播域ARP协议：什么是ARP协议？AddressResolutionProtocol地址解析协议将一个已知的IP地址解析为MAC地址arp-a查看arp缓存表arp-
.2广播与广播域：广播：将广播地址作为目的地址的数据帧广播域：网络中能接收到同一个广播所有结点的集合广播域越小越好，因为假如有五千个人同时都在说话，就听不清说的什么，要是只有五个人的广播域中有五个人在说话还是有可能听得清的。MAC地址广播：FF-FF-FF-FF-FF-FFIP地址广播：1.255.255.255.2552.广播IP地址为IP网段的广播地址，比如192.168.1.255/24交换机隔离不了广播域，路由器可以隔离广播域ARP协议：什么是ARP协议？AddressResolutionProtocol地址解析协议将一个已知的IP地址解析为MAC地址arp-a查看arp缓存表arp-
我有带有take(5)顶行的SparkDataFrame，如下所示:[Row(date=datetime.datetime(1984,1,1,0,0),hour=1,value=638.55),Row(date=datetime.datetime(1984,1,1,0,0),hour=2,value=638.55),Row(date=datetime.datetime(1984,1,1,0,0),hour=3,value=638.55),Row(date=datetime.datetime(1984,1,1,0,0),hour=4,value=638.55),Row(date=date
我有带有take(5)顶行的SparkDataFrame，如下所示:[Row(date=datetime.datetime(1984,1,1,0,0),hour=1,value=638.55),Row(date=datetime.datetime(1984,1,1,0,0),hour=2,value=638.55),Row(date=datetime.datetime(1984,1,1,0,0),hour=3,value=638.55),Row(date=datetime.datetime(1984,1,1,0,0),hour=4,value=638.55),Row(date=date
Spark3.0.0集群搭建前言集群搭建具体步骤Standalone模式1、下载`spark-3.0.0`的jar包2、上传并解压3、配置SPARK_HOME环境变量4、修改配置4.1修改spark-defaults.conf4.2修改spark-env.sh4.3修改slaves文件5、将spark-3.0.0-bin-hadoop3.2目录分发到其他节点6、启动Spark集群7、在web界面查看SparkUI8、测试Yarn模式1、开启hdfs、yarn服务2、修改Hadoop中的yarn-site.xml
