一、安装docker并生成相关的镜像（1）安装docker安装docker教程https://www.runoob.com/docker/centos-docker-install.html只要在终端输入：sudodockerrunhello-world后出现如下图的内容就证明安装docker成功了（2）拉取CentOS镜像（Ubuntu镜像也行）在终端输入：sudodockerpullcentos在终端输入：sudodockerimages，可以看到刚刚拉取的两个镜像每次执行docker语句都要在前面加sudo，比较麻烦，直接将hadoop用户加入docker用户组，就不用再输入sudo了。
JavaEE传送门JavaEESpring——Bean作用域和生命周期Spring——SpringBoot创建和使用目录SpringBoot配置文件SpringBoot配置文件格式properties配置文件properties基本语法properties缺点yml配置文件yml基本语法yml配置不同类型数据及nullyml配置对象yml配置集合propertiesVSyml设置不同环境的配置文件SpringBoot配置文件如果没有配置信息,SpringBoot项目就不能连接和此操作数据库,甚至是不能保存可以用于排查问题的关键日志,配置文件的作用是非常重要的.系统使用的配置文件(系统配置文件)
✨SpringCloud:微服务基础知识一、系统架构演变1.单体应用架构2.垂直应用架构3.分布式架构4.SOA架构4.1SOA概念4.2SOA5.微服务架构6.SOA和微服务架构的关系2.分布式核心知识1.分布式中的远程调用1.1RESTFUL接口1.2RPC协议1.3二者的区别与联系2.分布式中的CAP原理📃个人主页:不断前进的皮卡丘🌞博客描述:梦想也许遥不可及，但重要的是追梦的过程，用博客记录自己的成长，记录自己一步一步向上攀登的印记🔥个人专栏:微服务专栏一、系统架构演变随着互联网的发展，网站应用的规模不断扩大，常规的应用架构已无法应对，分布式服务架构以及微服务架构势在必行，亟需一个治理
我有用C#编写的映射器和缩减器可执行文件。我想将这些与Hadoop流式处理一起使用。这是我用来创建Hadoop作业的命令...hadoopjar$HADOOP_HOME/contrib/streaming/hadoop-streaming-*.jar-input"/user/hduser/ss_waits"-output"/user/hduser/ss_waits-output"–mapper"monomapper.exe"–reducer"monoreducer.exe"-file"mapper.exe"-file"reducer.exe"这是每个映射器遇到的错误...java.io
前言为了保证数据的正确性、完整性，前后端都需要进行数据检验。作为一名后端开发工程师，不能仅仅依靠前端来校验数据，我们还需要对接口请求的参数进行后端的校验。最常见的做法就是通过if/else语句来对请求的每一个参数一一校验，当很多参数需要校验的时候，if/else语句就会比较长，写起来也比较麻烦，一点都不简洁、美观。所以，今天来和大家分享一下SpringBootValidation。spring-boot-starter-validationSpringBoot2.31之后，spring-boot-starter-validation已经不包括在了spring-boot-starter-web中
一、Spark概述.Spark于2009年诞生于美国加州大学伯克利分校的AMP实验室，它是一个可应用于大规模数据处理的统一分析引擎。Spark不仅计算速度快，而且内置了丰富的API，使得我们能够更加容易编写程序。Spark在2013年加入Apache孵化器项目，之后获得迅猛的发展，并于2014年正式成为Apache软件基金会的顶级项目。Spark生态系统已经发展成为一个可应用于大规模数据处理的统一分析引擎，它是基于内存计算的大数据并行计算框架，适用于各种各样的分布式平台的系统。在Spark生态圈中包含了SparkSQL、SparkStreaming、GraphX、MLlib等组件。 图1-1
如何解决spring循环依赖在Spring框架中，allowCircularReferences属性是用于控制Bean之间的循环依赖的。循环依赖是指两个或多个Bean之间相互依赖的情况，其中一个Bean依赖于另一个Bean，同时另一个Bean又依赖于第一个Bean。allowCircularReferences属性默认是关闭的，即不允许循环依赖存在。如果两个或多个Bean之间存在循环依赖，Spring会抛出BeanCurrentlyInCreationException异常，以避免可能出现的死循环和性能问题。默认情况下，Spring不允许循环依赖，如果存在循环依赖，会抛出BeanCurrent
1.Security 基本配置加入如下依赖org.springframework.bootspring-boot-starter-security创建一个测试Controller如下启动项目后浏览器访问http://localhost:8080/hello提示登录application.yml配置security的name与password 登录后即可正常访问 2.配置不同用户访问页面的不同权限管理员，同事具有ADMIN,USER权限，可以访问所有资源普通用户，只能访问/product/**@Overrideprotectedvoidconfigure(AuthenticationManage
1.Filter介绍Filter是实现在网关路由之前或之后加入一些逻辑，或者拦截过滤的工具，称为过滤器。在SpringCloudGateway中除了内置的Filter之外，也可以自定义Filter来实现自己想要的功能。原理图如下：2.内置FilterSpringcloudgateway内置了很多的filter，单一的有32种，全局的有9种。这个数量实在是太惊人了，而且用法都比较简单，所以这里大家可以自行根据官网给出的演示进行练习官方网址：SpringCloudGatewayGateWay内置的Filter生命周期为两种：pre（业务逻辑之前）post（业务逻辑之后）GateWay本身自带的Fi
文章目录1.HDFSShell概述1.1操作命令管理命令其他命令1.HDFSShell概述HDFSShell是由一系列类似LinuxShell的命令组成的。命令大致可分为操作命令、管理命令、其他命令三类1.1操作命令操作命令是以“hdfsdfs”开头的命令。通过这些命令，用户可以完成HDFS文件的复制、删除和查找等操作，Shell命令的一般格式如下。hdfsdfs[通用选项]其中，hdfs是Hadoop系统在Linux系统中的主命令；dfs是子命令，表示执行文件系统操作；通用选项由HDFS文件操作命令和操作参数组成。(1)创建文件夹命令：hdfsdfs-mkdir[-p]-p]：表示如果父目录
