草庐IT

数仓架构

全部标签

621.【系统架构】模块的内聚类型

内聚表示模块内部代码成分之间联系的紧密程度,是从功能角度来度量模块内的联系。一个好的内聚模块应当恰好做目标单一的一件事情。根据内聚度从高到低的排序,可列出下列7中内聚类型。功能内聚:完成一个单一的功能,各个部分协同工作,缺一不可。顺序内聚:处理元素相关,而且必须顺序执行。通信内聚:所有处理元素集中在一个数据结构的区域上。过程内聚:处理元素相关,而且必须按特定的次序执行。时间内聚:所包含的任务必须在同一时间间隔内执行。逻辑内聚:完成逻辑上相关的一组任务。偶然内聚:完成一组没有关系或松散关系的任务。一般来说,系统中各模块的内聚越高,则模块间的耦合就越低;内聚高使得模块的可理解性和维护性大大增强。因

本文将从云原生的概念、背景知识、Kubernetes架构及核心组件、应用场景、案例研究等方面深入剖析云原生课程的相关知识点

作者:禅与计算机程序设计艺术1.简介2020年,技术快速发展,云计算火爆。云原生领域也随之蓬勃发展。云原生已经成为大势所趋,大量企业都在逐渐转型云原生应用架构。国内外云服务厂商也纷纷推出基于Kubernetes的服务平台,而Kubernetes又是云原生开源技术体系的一部分。为了帮助读者更好地理解、掌握云原生技术,本文将从云原生的概念、背景知识、Kubernetes架构及核心组件、应用场景、案例研究等方面深入剖析云原生课程的相关知识点。2.概念术语说明2.1.云计算概念定义“云计算”(Cloudcomputing)是一种新的计算模式,它使得用户能够通过网络轻松访问到远程服务器或存储设备、处理数

iVX低代码平台系列详解 -- 系统架构

写在前面ivx动手尝试电梯:ivx在线编辑器iVX系列教程持续更新中系列文章可看:iVX低代码平台系列详解–概述篇(一)iVX低代码平台系列详解–概述篇(二)iVX低代码平台系列详解–概述篇(三)一、前后端分离架构概览:前台部分,对应前端应用程序,负责客户端界面的展示与交互。在iVX中,前端程序支持多种类型,包括web应用,小程序,原生app,与windowsexe应用。在运行时,每个用户都会在本地客户端下载或安装一份前端程序来运行;后台部分,对应服务端程序,部署在后台服务器(集群)中,负责后台数据与通信逻辑的处理应用编辑举例:假设我们要做一个简单的表单提交应用,其应用架构如下:左侧用户界面,

100万级连接,爱奇艺WebSocket网关如何架构

说在前面在40岁老架构师尼恩的读者社区(50+)中,很多小伙伴拿到一线互联网企业如阿里、网易、有赞、希音、百度、滴滴的面试资格。最近,尼恩指导一个小伙伴简历,写了一个《高并发网关项目》,此项目帮这个小伙拿到字节/阿里/微博/汽车之家面邀,所以说,这是一个牛逼的项目。为了帮助大家拿到更多面试机会,拿到更多大厂offer,尼恩决定:9月份给大家出一章视频介绍这个项目的架构和实操,《33章:10Wqps高并发Netty网关架构与实操》,预计月底发布。然后,提供一对一的简历指导,这里简历金光闪闪、脱胎换骨。《33章:10Wqps高并发Netty网关架构与实操》海报如下:配合《33章:10Wqps高并发

Ubuntu aarch64架构安装docker

要在Ubuntu上安装Docker,可以按照以下步骤进行:1.确认你的计算机是aarch64架构,可以使用命令`uname-m`检查。2.安装Docker依赖项sudoapt-getupdatesudoapt-getinstallapt-transport-httpsca-certificatescurlgnupglsb-release3.添加DockerGPG密钥: curl-fsSLhttps://download.docker.com/linux/ubuntu/gpg|sudogpg--dearmor-o/usr/share/keyrings/docker-archive-keyring

04架构管理之分支管理实践-一种git分支管理最佳实践

        专栏说明:针对于企业的架构管理岗位,分享架构管理岗位的职责,工作内容,指导架构师如何完成架构管理工作,完成架构师到架构管理者的转变。计划以10篇博客阐述清楚架构管理工作,专栏名称:架构管理之道一句话导读        对于架构管理、研发管理中,分支管理是公司研发过程中必不可少的一个实践。本文主要是根据个人及公司实践,来说明下具体的分支管理方法,这里的分支指的git仓库的代码分支。分支管理方法有很多,大家可以自行定义,只要能够完成研发协作即可。目录一句话导读一、环境管理        1.开发环境        2.测试环境        3.预发布环境        4.生产环

【Java架构-版本控制】-Git基础

本文摘要Git作为版本控制工具,使用非常广泛,在此咱们由浅入深,分三篇文章(Git基础、Git进阶、Gitlab搭那家)来深入学习Git文章目录本文摘要1.Git仓库基本概念1.1远程仓库(Remote)1.2本地库(Repository)2.Git仓库工作流程3.Git常用命令4.Git配置文件4.1.查看配置文件4.2.新增配置文件4.3.删除配置文件5..gitignore文件5.1.文件加载进暂存区5.2.glob模式5.3.匹配示例5.4.定义全局忽略文件5.5.通用忽略文件6.diff6.1.命令6.2.工作空间与暂存区6.3.暂存区与版本库6.4.工作空间与版本库6.5.版本库与

带你掌握数仓的作业级监控TopSQL

摘要:目前TopSQL功能被用户广泛使用,是性能定位、劣化分析、审计回溯等重要的基石,为用户提供覆盖内存、耗时、IO、网络、空间等多方面的监控能力。本文分享自华为云社区《GaussDB(DWS)监控工具指南(一)作业级监控TopSQL》,作者:幕后小黑爪。1、引言:监控系统是智能化管理和自动化运维的基石,可以为资源规划,故障排查,性能优化提供至关重要的数据支持。GaussDB(DWS)作为企业级数仓,为用户提供了一整套覆盖实例级、用户级、作业级的资源监控能力,其中,作业级监控(下文统称为TopSQL)主要是对运行作业的监控,包括了实时运行作业的相关信息,历史运行作业的相关信息等。它收集的数据来

一文搞定接口幂等性架构设计方案

幂等性介绍现如今很多系统都会基于分布式或微服务思想完成对系统的架构设计。那么在这一个系统中,就会存在若干个微服务,而且服务间也会产生相互通信调用。那么既然产生了服务调用,就必然会存在服务调用延迟或失败的问题。当出现这种问题,服务端会进行重试等操作或客户端有可能会进行多次点击提交。如果这样请求多次的话,那最终处理的数据结果就一定要保证统一,如支付场景。此时就需要通过保证业务幂等性方案来完成。什么是幂等性幂等是一个数学与计算机学概念,即f(n)=1^n,无论n为多少,f(n)的值永远为1,在数学中某一元运算为幂等时,其作用在任一元素两次后会和其作用一次的结果相同。在编程开发中,对于幂等的定义为:无

金融机构架构面临的挑战-1.1 容灾

以云计算、大数据、人工智能、区块链等为代表的新一代技术已经崛起,不断向金融领域渗透、银行也通过信息科技转型、数字化来应对挑战,保持传统金融行业“高可用、高标准、低风险”特性的同时,也增加了互联网金融对“高性能、高弹性、低成本”方面的要求。经过多年的发展和演进,走出了一条解决海量数据存储、计算以及应对高并发交易的道路,通过微服务分布式架构、云计算和大数据等技术构建了一套能满足业务发展要求的技术体系。1.1容灾在系统高可用架构设计中,容灾能力的建设不可或缺,容灾设计强调的是系统对灾难时间具备快速响应能力,保障系统持续高可用,系统面对异常情况,如软硬件自身故障,外界环境影响(自然灾害)需具备快速恢复