草庐IT

MPP架构

全部标签

探索容灾架构演进之路-从单点到异地多活

1.挑战与变革在公司发展初期,业务发展和用户增长是首要关注的焦点。然而,随着业务规模不断扩大,用户数量逐渐攀升,应用稳定性的重要性也变得愈发凸显。在这个演进过程中,传统架构下的应用部署模式开始显露出多方面的稳定性风险,其中最为显著的问题之一就是机房单点故障。当机房发生故障时,业务无法迅速恢复,这可能导致巨大的损失。 以近两年实际案例为例,我们可以看到,无论是云上机房还是自建机房,都存在机房故障的潜在风险。例如:2022年12月18日,阿里云香港Region可用区C遭遇机房冷却系统异常,导致大规模服务中断,故障长达近12个小时。2023年3月29日,唯品会南沙机房冷却系统故障,导致线上商城停止服

HarmonyOS鸿蒙操作系统架构开发

什么是HarmonyOS鸿蒙操作系统?HarmonyOS是华为公司开发的一种全场景分布式操作系统。它可以在各种智能设备(如手机、电视、汽车、智能穿戴设备等)上运行,具有高效、安全、低延迟等优势。 目录HarmonyOS一、HarmonyOS与其他操作系统相比,HarmonyOS有以下优势:全场景:可以在各种智能设备上运行。分布式架构:可以将多个设备联合使用,提供更多的应用场景。高效:具有更快的响应速度和更低的延迟。安全:采用多层安全防护,保障用户隐私和数据安全。开放:支持开发者自由创新和扩展。二、技术能力分析HarmonyOS的架构。HarmonyOS的架构分为四个层次,从上到下分别是应用层、

android - EventBus的使用、内存和架构

我开始在我的应用程序中使用EventBus,它真的很好用,它解决了很多问题并简化了代码,并且在整个应用程序中传播所有线程和一切都很棒,但我感觉我可能滥用事件的使用。现在一切都很好,我正在功能强大的设备上进行测试,应用响应非常好,但我还有很多编码工作要做,我开始质疑自己触发太多事件会产生怎样的影响整个应用程序。因此,如果我的应用程序中有很多事件存在一些问题,或者是否存在与此事件的使用相关的一些已知内存问题,那么这个问题是针对任何有使用该库经验的人的问题。我试图明智地使用它,但很难不将它大量包含在您的体系结构中,因为它是一个非常好的功能。无论如何,如果您对这个主题有话要说,那将是很好的,因

回顾数据中心架构的演进

在数字时代的浪潮中,数据中心不再仅仅是企业基础设施的简单堆砌,而是经历了一场深刻的变革。从本地基础设施到与云环境的巧妙融合,现代数据中心的设计不断演变,以适应日益复杂和多样化的业务需求。传统的数据中心架构已被挑战,取而代之的是更灵活、更创新的设计理念。从网格结构到超级脊柱网格结构,每一种架构都为不同规模和类型的组织提供了独特的解决方案。而这种变革不仅仅是硬件和网络的变化,更是对数据中心运营和管理的重新思考。多层结构:传统的多层结构在现代企业数据中心中扮演着关键角色。这种结构主要包括核心层、聚合层和访问层。核心层允许连接到多个聚合模块和网络,以便在多个聚合单元之间进行分组交换。聚合层集成了服务模

深度揭秘爆火MoE!GPT-4关键架构,成开源模型逆袭杀手锏

Mistral上周末丢出的磁力链接震惊了开源圈子,这个7B×8E的开源MoE大模型性能已经到达了LLaMA270B的级别!而根据JimFan猜测,如果Mistral内部训练了34B×8E或者甚至100B+×8E级别的模型,那他们的能力很有可能已经无限接近GPT-4了。而在之前对于GPT-4结构的曝料中,大部分的信息也指向GPT-4很可能是由8个或者是16个MoE构成。为什么MoE能成为高性能大模型的必选项?简单来说,MoE是一种神经网络架构设计,在Transformer模块中集成了专家/模型层。当数据流经MoE层时,每个输入token都会动态路由到专家子模型进行处理。当每个专家专门从事特定任务

SSD基础架构与NAND IO并发问题探讨

在我们的日常生活中,我们经常会遇到一些“快如闪电”的事物:比如那场突如其来的雨、那个突然出现在你眼前的前任、还有就是今天我们要聊的——固态硬盘(SSD)。如果你是一个技术宅,或者对速度有着近乎偏执的追求,那么恭喜你,你找到了一个新朋友。这个朋友不仅快,而且非常稳定。他可以让你的游戏加载瞬间完成,让你的工作效率翻倍,甚至让你的电脑启动时间从“泡一杯咖啡”缩短到“打个哈欠”。但你知道吗?这种神奇的速度背后,隐藏着一个复杂的结构和原理。这就是我们今天要探索的主题——SSD架构原理。我们将深入到它的内部,看看那些小小的闪存颗粒是如何变成我们手中的高速存储设备的。这就像是一次奇妙的探险,我们将一起揭开S

大数据智能决策系统架构:决策系统与物联网

作者:禅与计算机程序设计艺术1.背景介绍1.1概述随着人类对信息化生活的逐步依赖,技术革命带来了巨大的生产力增长,同时也引起了新的生产关系的变革。从过去的简单生产生产过程,到今天的信息社会,所有企业都面临了新的运营管理、销售策略、产品开发等问题。智能化的决策系统的引入正逐渐成为一个热门话题。它能够自动地完成许多重复性的工作,降低管理成本、提升效率、改善服务质量。但是,如何将其应用于实际生产环境,将智能化决策功能落实到企业内部,还存在着很多技术和业务上的难点和挑战。基于IoT技术,以及大数据处理技术和模式的驱动,微软亚洲研究院(MSRA)近期在Azure上推出了一个大规模智能决策系统解决方案。该

Sermant:无代理服务网格架构解析及无门槛玩转插件开发

本文分享自华为云社区《Sermant:无代理服务网格架构解析及无门槛玩转插件开发》,作者:华为云社区精选。本期直播的主题是《从架构设计到开发实践,深入浅出了解Sermant》,华为云云原生DTSE技术布道师、华为云高级工程师、Sermant开源社区PMC核心成员栾文飞,为广大开发者详细从架构设计角度介绍了Sermant的类加载器架构和插件化机制,并在实战中从基础能力开发,到进阶使用统一动态配置能力、统一日志能力一步步完成插件开发。Sermant核心机制——插件化Sermant分为两层,Sermant框架层和Sermant服务治理层,Sermant框架提供了一系列的API用于插件开发者可以快速进

【ES实战】ES-Hadoop之关键特性、要求、安装、核心架构

文章目录KeyfeaturesRequirementsJDKElasticsearchHadoopApacheYARN/Hadoop2.xApacheHiveApacheSparkApacheSparkSQLInstallationMinimalisticbinariesDevelopmentBuildsUpgradingYourStackArchitectureMap/ReduceandShardsApacheSparkandShardsReadingfromElasticsearchWritingtoElasticsearchDataco-location数据协同定位Keyfeatures

聊聊分布式数据库TDSQL的技术架构

大家好,我是飞哥!咱们很多读者都是在互联网公司工作,大部分同学会有一种认知偏差,总以为互联网的业务对技术的要求是最高的。但其实不然。比如在对延时的要求上,高频量化交易就比互联网的延迟要求要高得多。在数据库上,银行、证券、电信在这些行业中对数据库的要求也比互联网高得多。拿银行举例,银行的系统里是连一分钱都不能错的,而且即使是十几年前的交易记录也必须能够查出来,对安全性的要求就更不用说了。在过去很长的一段时间里,这些行业选择数据库基本上就是Oracle和IBM的天下,各家企业在选型时基本就是Oracle和 DB2 之间二选一。但前几天看到IDC发布了《中国分布式关系型数据库2023年厂商评估》的报