本次操作以将本地代码提交到gitlab为例,不过都大同小异,差别不大。Git作为分布式版本控制软件,存储文件的位置叫做仓库。仓库有远程仓库(互联网上一台服务器或局域网内的一台服务器)和本地仓库(本机的一个目录)两种。系统中任意文件夹都可以作为本地仓库。本地仓库需要先初始化,生成git基本配置。然后把本地的操作添加到缓存区。把缓存区操作提交到本地库。最后把本地库数据推送到远程仓库。安装设置git想要把自己的内容提交到远程仓库,需要进行全局设置远程账号的用户名和邮箱。//设置自己的用户名gitconfig--globaluser.name"你的用户名"//设置自己的邮箱gitconfig--glo
在公网IP为x.x.x.x、y.y.y.y和z.z.z.z并装有Centos8的服务器上进行hadoop集群搭建、zookeeper集群搭建和hbase搭建,都安装hadoop-3.1.3、server-jre-8u202-linux-x64、apache-zookeeper-3.6.4-bin和hbase-2.5.0-bin。环境准备(三台服务器都一样)第一步,创建统一工作目录。#软件安装路径命令:mkdir-p/usr/local/src/server/#数据存储路径命令:mkdir-p/usr/local/src/data/#安装包存放路径命令:mkdir-p/usr/local/src
文章目录Linux文件内容查看和编辑1.查看文件内容cat用法cat详解概要主要用途参数选项返回值例子注意lessless详解补充说明语法选项参数实例moremore详解补充说明语法选项参数实例2.文件搜索和过滤grepgrep详解语法选项参数实例findfind详解语法选项参数实例awkawk详解语法选项参数实例3.文件编辑nanonano详解语法选项参数实例vi/vimvi/vim详解语法选项参数实例总结Linux文件内容查看和编辑1.查看文件内容cat用法cat命令用于显示整个文件的内容。它将文件的内容一次性输出到终端窗口。例如,要显示名为file.txt的文件内容,可以运行以下命令:c
目录1、语法说明2、本地仓库相关操作建立一个git文件(gitinit)把工作区的文件添加到暂存区(gitadd)把暂存区的文件添加到本地仓库(gitcommit)查看暂存区和本地仓库中的文件(gitls-files)查看文件夹下所有文件的状态(gitstatus)查看版本库中的提交记录(gitlog)恢复的文件(gitcheckout)版本退回(gitreset)查看本地仓库文件和暂存区文件中的内容(gitshow)文件差异对比(gitdiff)忽略文件(.gitignore)3、SSH简介(密钥,GitHub)在本地生成公钥和私钥在GitHub中添加公钥4、远程仓库(GitHub)相关操作
环境:Mac工具:NPM可通过官网查询一些模块相关NPMDoc通过官网文档了解更多的关于NPM的使用安装NPM是Node.js的包管理工具,可用于解决Node.js在代码部署上的问题。新版本的Node.js已经集成了NPM,因此可通过下载Node.js来使用NPM。Node.js下载地址Node.js历史版本下载地址下载成功后,打开终端运行命令,检测版本是否运行成功://检测node.jsnode-v//检测npmnpm-v如果有Homebrew的话,可以通过它进行安装:brewinstallnodeNPM常用命令更新NPM,主要用于能够获取最新的软件包相关npminstallnpm-g卸载N
1.练习一1.数据准备在hdfs上创建文件夹,上传csv文件[root@kb129~]#hdfsdfs-mkdir-p/app/data/exam查看csv文件行数[root@kb129~]#hdfsdfs-cat/app/data/exam/meituan_waimai_meishi.csv|wc-l2.分别使用RDD和SparkSQL完成以下分析(不用考虑数据去重)开启sparkshell[root@kb129~]#spark-shell(1)加载csv文件,创建RDDscala>valfileRdd=sc.textFile("/app/data/exam/meituan_waimai_m
作者:禅与计算机程序设计艺术1.背景介绍ApacheHBase是一个开源的分布式NoSQL数据库,它是Hadoop的子项目。HBase是ApacheHadoop中用于存储非结构化数据(即NoSQL)的一种行列式存储数据库。其核心功能包括:海量数据的存储、高性能查询、实时写入和实时访问。HBase中的列族(ColumnFamilies)是一个重要的概念,它把表按功能分成多个列族,并通过列簇来标识不同的列族。在每个列簇中可以保存多个列,这些列被视为同一类型的数据,但不属于相同的列族。这样,用户可以根据需要只访问所需的列簇,从而提高查询效率。列簇是可选的,用户可以在创建表时指定需要创建的列族数量。若
本实例采用Eclipse开发工具。启动Eclipse,启动以后,出现如下图所示界面,点击ok按钮。启动进入Eclipse以后的程序开发界面如下图所示。点击界面顶部的“File”菜单,在弹出的子菜单(如下图所示)中选择“New”,再选择子菜单中的“Project”。这时会弹出一个Java工程创建对话框(如下图所示),在“Projectname”文本框中输入“HBaseTest”,在“JRE”选项卡中选中第2项“UseaprojectspecificJRE”,然后点击界面底部的“Next”按钮。在弹出的界面中(如下图所示),用鼠标点击“Libraries”选项卡,然后,点击界面右侧的“AddExt
hbase的使用记录为什么要用hbase项目里要记录k-v键值对,且数据量非常庞大达到T级别,传统的关系型数据库扛不住查询压力。hbase对于大数据量的查询支持比较优秀。hbase准备工作1、虚拟机安装-linux安装这个应该没有什么问题,网上有很多破解版的,再下一个centos7镜像进行安装。2、删除自带的jdk有些用窗口安装的linux自带了jdk,可以先删掉。因为没有配置环境变量需先切换到root下,然后执行下面的命令yum-yremovejava*3、安装jdk去oracle下载一个jdk8,我是自己有,上传到虚拟机/root目录#进入存放安装包的/root/目录cd/root/#解压
一、涉及软件包资源清单 1、java这里使用的是openjdk 2、hadoop-3.3.6.tar.gz 3、hbase-2.5.6-hadoop3-bin.tar.gz 4、phoenix-hbase-2.5-5.13-bin.tar.gz 5、apache-zookeeper-3.8.3-bin.tar.gz 6、openssl-3.0.12.tar.gz 二、安装 1、操作系统环境准备 换源sudovim/etc/apt/sources.list打开资源列表文件进行查看,将内容修改为如下(如果是国内源不管是清华的