Hdfsdfs-appendToFile：把本地文件中的内容追加到HDFS中指定文件的末尾Hdfsdfs-cat：用于查看分布式文件系统中指定文件里面的内容；两个命令在一个截图中Hdfsdfs-checksum：用来查看指定文件的MD5值Hdfsdfs-charp：对分布式文件系统中的文件进行授权给指定用户Hdfsdfs-chmod --R：对分布式文件系统中的文件进行授权Hdfsdfs-chown：对HDFS中的文件进行权限授予Hdfsdfs-copyFromLocal-f -l -p：把本地的文件复制到HDFS路径中Hdfsdfs-copyToLocal -p -ignoreCrc
一、yarn常用命令：1.yarnapplication查看任务（1）列出所有Applicationyarnapplication-list（2）根据Application状态过滤：yarnapplication-list-appStates（所有状态：ALL、NEW、NEW_SAVING、SUBMITTED、ACCEPTED、RUNNING、FINISHED、FAILED、KILLED）2.yarnlogs查看日志（1）查看Application日志yarnlogs-applicationId（2）查询Container日志yarnlogs-applicationId-containerId
一、yarn常用命令：1.yarnapplication查看任务（1）列出所有Applicationyarnapplication-list（2）根据Application状态过滤：yarnapplication-list-appStates（所有状态：ALL、NEW、NEW_SAVING、SUBMITTED、ACCEPTED、RUNNING、FINISHED、FAILED、KILLED）2.yarnlogs查看日志（1）查看Application日志yarnlogs-applicationId（2）查询Container日志yarnlogs-applicationId-containerId
一、为什么要设置超时参数hbase设计的目标是成为一个高可用集群，能够在失败的时候快速响应，当出现网络抖动等偶发情况时，能快速重试，让用户可以快速拿到结果。而不是一直卡着，使得上层应用阻塞等待。这个功能可以通过设置下面的3个超时参数、超时重试次数来实现。在超时的时候，立即主动断开，并重试。可以在当前集群上重试，也可以切换集群重试。 二、3个超时参数及其机制hbase.rpc.timeouthbaseclient和server之间通过rpc通信，此参数设置了rpc超时时间。超时后将主动断开rpc请求。 hbase.client.opeation.timeouthbaseclient从发出数据操作
Hadoop常用命令1.创建文件夹2.上传文件的两种方式3.上传文件夹4.删除目录dir:5.查看目录文件6.查看文件内容7.下载文件8.查看文件夹下的文件数量9.Hadoop上移动文件10.查着文件夹占用内存11.查看文件夹下数据占用内存12.查着Hadoop任务进程id13.kill掉Hadoop任务进程id1.创建文件夹hadoopdfs-mkdir/hadoop/path/2.上传文件的两种方式hdfsdfs-copyFromLocal/local/data/file.txt/hadoop/data:将本地文件上传到hdfs上(原路径只能是一个文件)hadoopdfs-put/loca
文章目录Hbase安装配置一，测试Hadoop安装1，ssh免密测试2，jps查看进程二，安装Hbase1，拷贝Hbase-2.5.0到/opt目录下三，配置环境1，配置环境变量,/etc/profile目录2，配置Hbase配置文件(Hbase的安装目录下的conf目录)3，Hbase的三种模式配置修改4，配置slave1和slave2节点四，Hbase的服务启动与验证1，启动hbase:start-hbase.sh2，查看启动进程3，HbaseshellHbase安装配置一，测试Hadoop安装Hbase:是基本Hadoop的一个数据库，全名叫HadoopDatabasehadoop的数据
文章目录Hbase安装配置一，测试Hadoop安装1，ssh免密测试2，jps查看进程二，安装Hbase1，拷贝Hbase-2.5.0到/opt目录下三，配置环境1，配置环境变量,/etc/profile目录2，配置Hbase配置文件(Hbase的安装目录下的conf目录)3，Hbase的三种模式配置修改4，配置slave1和slave2节点四，Hbase的服务启动与验证1，启动hbase:start-hbase.sh2，查看启动进程3，HbaseshellHbase安装配置一，测试Hadoop安装Hbase:是基本Hadoop的一个数据库，全名叫HadoopDatabasehadoop的数据
ApacheHbase系列文章1、hbase-2.1.0介绍及分布式集群部署、HA集群部署、验证、硬件配置推荐2、hbase-2.1.0shell基本操作详解3、HBase的javaAPI基本操作（创建、删除表以及对数据的添加、删除、查询以及多条件查询）4、HBase使用(namespace、数据分区、rowkey设计、原生api访问hbase)5、ApachePhoenix(5.0.0-5.1.2)介绍及部署、使用（基本使用、综合使用、二级索引示例）、数据分区示例6、Base批量装载——Bulkload（示例一：基本使用示例）7、Base批量装载-Bulkload（示例二：写千万级数据-my
什么是hbase1.1简介HBase是一个面向列式存储的分布式数据库，其设计思想来源于Google的BigTable论文。HBase底层存储基于HDFS实现，集群的管理基于ZooKeeper实现。HBase良好的分布式架构设计为海量数据的快速存储、随机访问提供了可能，基于数据副本机制和分区机制可以轻松实现在线扩容、缩容和数据容灾，是大数据领域中Key-Value数据结构存储最常用的数据库方案1.2.特点易扩展Hbase的扩展性主要体现在两个方面，一个是基于运算能力（RegionServer）的扩展，通过增加RegionSever节点的数量，提升Hbase上层的处理能力；另一个是基于存储能力的扩
Git面试题001什么是Git?Git是一个开源的分布式版本控制系统，是目前世界上最先进、最流行的版本控制系统。可以快速高效地处理从很小到非常大的项目版本管理。特点：项目越大越复杂，协同开发者越多，越能体现出Git的高性能和高可用性。002Git常用的命令有哪些?gitadd添加文件到暂存区gitcommit提交文件到本地仓库gitpull从远程仓库拉取项目到本地gitpush将本地仓库的新的改变推送到远程仓库gitclone将远程仓库复制到本地gitfetch抓取gitmerge合并003gitpull、gitmerge、gitfetch三个命令的区别？gitclone：是在本地没有版本库的
