草庐IT

04HDFS简介

全部标签

Linux | Ubuntu20.04系统使用命令从移动硬盘/U盘拷贝文件到服务器上

*确认自己移动硬盘、U盘的格式,本文为exfat格式STEP1:把移动硬盘插到Ubuntu系统的主机上查看disk默认位置#查看移动硬盘/U盘在哪个位置命令fdisk-l#查询后出现了包含电脑系统的所有硬盘查看最后的位置,我的显示为Device,位置为/dev/sdb1,2048,(后面省略)*注意:此时无法直接查看硬盘内容STEP2:新建一个挂载点进入Linux系统主界面,如果是user的话,获取管理员权限#获取高级用户权限sudo-i#新建一个文件夹,文件夹名为‘usb’#最好不要是最终复制的文件夹mkdirusbSTEP3:将移动硬盘进行挂载挂载移动硬盘/U盘命令如下,其中/dev/sd

ubuntu20.04 解决ros,cv_bridge,opencv连接以及vins-mono,vins-fusion,pl-vins等运行问题

ubnutu下经常用到ROS,ubnutu20.04安装ros时自带opencv4.2,但是很多工程用到的opencv都是低版本opencv3系列,比如vins-mono就依赖opencv3。虽然很多教程说在CMakeLists指定opencv版本,但是会出现很多问题:error:‘CV_RGB2GRAY’wasnotdeclaredinthisscope或者警告/usr/bin/ld:warning:libopencv_calib3d.so.3.3,neededby/home/gl/SLAM/pl_vins_ws/devel/lib/libcamera_model.so,mayconflic

在Ubuntu上安装docker(Ubuntu版本18.04)

在Ubuntu上安装docker详细步骤1、卸载之前的docker版本2、安装docker仓库3、在系统中添加Docker的官方密钥4、添加docker源5、再次更新源列表6、查看可以安装的docker版本并安装docker7、使用命令查看是否安装成功以及安装的docker版本8、启动docker服务并设置开机自动启动docker9、查看docker是否正常开启10、检查运行是否能正常进行1、卸载之前的docker版本若之前安装过docker,需要先执行下面的命令卸载docker的旧版本sudoapt-getremovedockerdocker-enginedocker.iocontainer

[SpringCloud] Eureka 与 Ribbon 简介

目录一、服务拆分1、案例一:多端口微服务2、案例二:服务远程调用二、Eureka1、Eureka原理分析2、Eureka服务搭建(注册eureka服务)3、Eureka服务注册(注册其他服务)4、Eureka服务发现(服务拉取)三、Ribbon负载均衡 1、负载均衡原理2、负载均衡策略3、饥饿加载一、服务拆分通过2个案例,学习如何实现服务拆分。都需要引入web的起步依赖:1、案例一:多端口微服务需求:将Order和User模块的服务进行拆分,通过不同的URL进行服务调用。(1)项目结构为2个模块都添加上各自的Controller;(2)编写Controller写一个简单的Controller,

Ubuntu23.04安装Wine和微信

一、版本1、Ubuntu:23.04(Lunar)2、wine:稳定版8.0.23、微信:64位3.9.6一、安装wine1、启用32位支持sudodpkg--add-architecturei3862、添加Wine存储库密钥(1)sudomkdir-pm755/etc/apt/keyrings(2)sudowget-O/etc/apt/keyrings/winehq-archive.keyhttps://dl.winehq.org/wine-builds/winehq.key3、添加官方Wine存储库sudowget-NP /etc/apt/sources.list.d/ https://d

[linux]mount与nfs挂载简介

文章目录挂载mount目录间挂载卸载与fuserfstabNFSServer配置命令NFSclientmount用于挂载设备:挂载分区:mount/dev/sdb1/data;文件夹间:mount--bind/ori/data;data文件将被ori中遮盖。挂载mountmount用于挂载Linux系统下的分区或文件:mount[-fv][-tvfstype][-ooptions]device{mounted-dir}f:并不执行实际挂上的动作,而是模拟整个挂上的过程(常用于排错);一般与一起用;v:显示较详细信息;vfstype指定文件系统类型(不指定时,系统会自动获取正确的类型)光盘或光盘

HDFS读写流程详细过程

HDFS读写流程详细过程HDFS的定义一、组成架构二、优缺点三、读流程四、NameNode和SeconderyNameNode五、写流程HDFS的定义HDFS(HadoopDistributedFileSystem),它是一个文件系统,用于存储文件,通过目录树来定位文件;其次,它是分布式的,由很多服务器联合起来实现其功能,集群中的服务器有各自的角色。适合一次写入,多次读出的场景。一个文件经过创建、写入和关闭之后就不需要改变。一、组成架构NameNode(NN):集群的Master,它是一个主管,管理者(1)管理HDFS的命名空间(2)配置副本策略(3)管理数据块(Block)映射信息(4)处理

防火墙简介

防火墙虽然具有路由交换功能,但与路由器的不同点是路由器是连通性设备,主要用于确保网络连通和数据转发,而防火墙的基本作用是保护特定网络免受“不信任”的网络的攻击,同时还必须允许两个网络之间可以进行合法的通信。防火墙的基本信息防火墙主要工作在OSI模型的三四层,防火墙主要基于IP报文进行检测,对端口进行限制。防御对象:授权用户非授权用户防火墙是一种隔离(非授权用户在区域间)并过滤(对受保护网络有害流量或数据包)的设备。防火墙的区域防火墙一般位于不同的安全区域之间,过滤不同区域之间的流量,需要注意的是指向防火墙自身的区域为local区域隔离不同区域区域根据安全等级来划分区域有不同的安全等级,内网(t

Ubuntu 20.04.4 由于没有公钥,无法验证下列签名: NO_PUBKEY 7EA0A9C3F273FCD8 正在读取软件包列表... 完成 W: GPG 错误:https://downlo

1错误信息由于没有公钥,无法验证下列签名:NO_PUBKEY7EA0A9C3F273FCD8正在读取软件包列表…完成W:GPG错误:https://download.docker.com/linux/ubuntubionicInRelease:由于没有公钥,无法验证下列签名:NO_PUBKEY7EA0A9C3F273FCD8E:仓库“https://download.docker.com/linux/ubuntubionicInRelease”没有数字签名。2解决方案$cd/etc/apt/sources.list.d/$sudorm-fdocker.list$sudorm-fdocker.l

一百七十二、Flume——Flume采集Kafka数据写入HDFS中(亲测有效、附截图)

一、目的作为日志采集工具Flume,它在项目中最常见的就是采集Kafka中的数据然后写入HDFS或者HBase中,这里就是用flume采集Kafka的数据导入HDFS中二、各工具版本(一)Kafkakafka_2.13-3.0.0.tgz(二)Hadoop(HDFS)hadoop-3.1.3.tar.gz(三)Flumeapache-flume-1.9.0-bin.tar.gz三、实施步骤(一)到flume的conf的目录下#cd /home/hurys/dc_env/flume190/conf(二)创建配置文件evaluation.properties#vi evaluation.prope