草庐IT

HDFS常用命令

全部标签

Windows运维常用命令、批处理脚本

1.创建批处理.bat文件,一键打开多个远程桌面连接mstsc远程服务。(首次远程时勾选记住密码,可以一键进入多个系统桌面)startmstsc/v:192.168.8.7:3389startmstsc/v:192.168.8.8:3389startmstsc/v:192.168.8.9:3389 2.定时关机 指定时间点关机:at23:30shutdown-s倒计时关机:(3秒后关机)shutdown-s-t3倒计时重启电脑:3秒后重启,在部分操作系统没有重启按钮时非常有用。shutdown-r-t33.一键查看服务器445-3389-139-135常用端口使用情况脚本  netstat-a

SQLserver常用命令-增删改查和约束

前言    在DBMS各种命令中,最为重要的就是“增删改查”四种命令,无论是sqlserver亦或是oracle和mysql,他们的增删改查语句都大体近似,一通百通,掌握了这些命令,就算在数据库的路上跨出了一大步。文章目录前言一、增二、删三、改四、查思维导图五、约束一、增关键字–insertINSERTINTO语句用于向表中插入新记录,有两种编写形式。第一种形式无需指定要插入的列名,只需提供被插入的值即可:insertintotable_namevalues(value1,value2,value3,...)第二种形式需要指定列名及被插入的值:insertintotable_name(colu

大数据开发之电商数仓(hadoop、flume、hive、hdfs、zookeeper、kafka)

第1章:数据仓库1.1数据仓库概述1.1.1数据仓库概念1、数据仓库概念:为企业制定决策,提供数据支持的集合。通过对数据仓库中数据的分析,可以帮助企业,改进业务流程、控制成本,提高产品质量。数据仓库并不是数据的最终目的地,而是为数据最终的目的地做好准备,这些准备包括对数据的:清洗、转义、分类、重组、合并、拆分、统计等。2、数据仓库的数据通常包括:业务数据、用户行为数据和爬虫数据等3、业务系统数据库(关系型数据库中)1)业务数据:主要指的是各行业在处理事务过程中产生的业务数据2)产生:用户在电商网站中登录、下单、支付等过程中,需要和网站后台数据库进行增删改查交互,产生的数据3)存储:都是存储到关

【愚公系列】2024年02月 大数据教学课程 022-Hadoop的HDFS

🏆作者简介,愚公搬代码🏆《头衔》:华为云特约编辑,华为云云享专家,华为开发者专家,华为产品云测专家,CSDN博客专家,CSDN商业化专家,阿里云专家博主,阿里云签约作者,腾讯云优秀博主,腾讯云内容共创官,掘金优秀博主,51CTO博客专家等。🏆《近期荣誉》:2022年度博客之星TOP2,2023年度博客之星TOP2,2022年华为云十佳博主,2023年华为云十佳博主等。🏆《博客内容》:.NET、Java、Python、Go、Node、前端、IOS、Android、鸿蒙、Linux、物联网、网络安全、大数据、人工智能、U3D游戏、小程序等相关领域知识。🏆🎉欢迎👍点赞✍评论⭐收藏文章目录🚀前言🚀一、

华为高斯数据库(OpenGauss)管理常用命令

1.查看节点状态[omm@openGauss2local]$gs_om-tstatus--detail#查看本机节点状态[ ClusterState ]cluster_state :Normalredistributing :Nocurrent_az   :AZ_ALL[ DatanodeState ]  node   node_ip    port   instance              state----------------------------------------------------------------------------------------------

Docker安装启动、常用命令、应用部署、迁移备份、Dockerfile、Docker私有仓库

目录1.Docker安装与启动1.1安装Docker 1.2设置ustc的镜像 1.3Docker的启动与停止2.常用命令2.1镜像相关命令2.1.1查看镜像2.1.2搜索镜像 2.1.3 拉取镜像2.1.4 删除镜像2.2容器相关命令2.2.1查看容器2.2.2 创建与启动容器2.2.3停止与启动容器2.2.4文件拷贝2.2.5目录挂载2.2.6查看容器IP地址2.2.7删除容器3.应用部署3.1MySQL部署3.2Tomcat部署 3.3Nginx部署3.4Redis部署 4.迁移与备份4.1 容器保存为镜像4.2 镜像备份4.3镜像恢复与迁移 5.Dockerfile5.1 什么是Doc

git常用命令简单总结并附上值得推荐的好文章

💗💗💗💗💗💗💗💗💗💗💗💗💗💗💗💗💗💗💗💗💗💗💗💗💗💗💗💗💗💗💗💗💗关注git在本地的配置问题,可以参考这篇文章,写的较为详细:非常详细的Git环境配置步骤,如果相以gitee作为远程仓库也是同样的操作😊下面这张图个人觉得很不错,等学完了这一套之后就会觉得是真牛逼画的👉初始化相关操作:gitinit:初始化本地仓库,建立工作区,并对工作区进行版本监控gitstatus:查看当前状态,可以显示文件的新建、修改、删除等等操作gitadd.:添加工作区所有文件到到版本库的暂存区中,如果你要提交的是单个文件,你也可以用gitadd后面跟单个或者多个那文件即可👉提交到版本库分支:gitcommit-m"c

人大金仓KingbaseES ksql的常用命令

Ksql的常用命令关键字:KingbaseES、ksql、交互工具、人大金仓、KingbaseES一、什么是ksql?1.1ksql概述Ksql是KingbaseES基于终端的前端,是KingbaseES的交互式客户端工具。提供交互式查询,通过文件输入或者命令行输入,得到查询结果。此外,ksql还提供一些元命令和多种类似shell的特性来为编写脚本和自动化多种任务提供方便。1.2ksql命令行架构Ksql命令行使用了一个两层模型,其中包括:1)客户端(用户命令行接口):命令行用户界面基于字符终端来实现。2)数据库(KingbaseES数据库):KingbaseES数据库使用基于消息的协议在Ks

一百八十二、大数据离线数仓完整流程——步骤一、用Kettle从Kafka、MySQL等数据源采集数据然后写入HDFS

一、目的经过6个月的奋斗,项目的离线数仓部分终于可以上线了,因此整理一下离线数仓的整个流程,既是大家提供一个案例经验,也是对自己近半年的工作进行一个总结。二、项目背景项目行业属于交通行业,因此数据具有很多交通行业的特征,比如转向比数据就是统计车辆左转、右转、直行、掉头的车流量等等。三、业务需求(一)预估数据规模(二)指标查询频率指标的实时查询由Flink实时数仓计算,离线数仓这边提供指标的T+1的历史数据查询四、数仓技术架构(一)简而言之,数仓模块的数据源是Kafka,终点是ClickHouse数据库第一步,用kettle采集Kafka的数据写入到HDFS中;第二步,在Hive中建数仓,ODS

docker学习(三)常用命令

docker学习(一)docker概述docker学习(二)docker安装部署docker学习(三)常用命令docker学习(四)使用commit制作镜像docker学习(五)使用Dockerfile制作镜像docker学习(六)卷Volumedocker学习(七)dockerdaemondocker学习(八)HTTP/HTTPS代理docker学习(九)docker调试docker学习(十)docker持久化存储docker容器操作1.docker环境信息—docker[info|version]2.容器生命周期管理—docker[create|exec|run|start|stop|re