作者信息:唐聪、王超凡,腾讯云原生产品中心技术专家,负责腾讯云大规模TKE集群和etcd控制面稳定性、性能和成本优化工作。王子勇,腾讯云专家级工程师,腾讯云计算产品技术服务专家团队负责人。概况作为当前中国广泛使用的云视频会议产品,腾讯会议已服务超过3亿用户,能高并发支撑千万级用户同时开会。腾讯会议数百万核心服务都部署在腾讯云TKE上,通过全球多地域多集群部署实现高可用容灾。在去年用户使用最高峰期间,为了支撑更大规模的并发在线会议的人数,腾讯会议与TKE等各团队进行了一轮新的扩容。然而,在这过程中,一个简单的etcd进程重启操作却触发了一个的诡异的K8s故障(不影响用户开会,影响新一轮后台扩容效
作者信息:唐聪、王超凡,腾讯云原生产品中心技术专家,负责腾讯云大规模TKE集群和etcd控制面稳定性、性能和成本优化工作。王子勇,腾讯云专家级工程师,腾讯云计算产品技术服务专家团队负责人。概况作为当前中国广泛使用的云视频会议产品,腾讯会议已服务超过3亿用户,能高并发支撑千万级用户同时开会。腾讯会议数百万核心服务都部署在腾讯云TKE上,通过全球多地域多集群部署实现高可用容灾。在去年用户使用最高峰期间,为了支撑更大规模的并发在线会议的人数,腾讯会议与TKE等各团队进行了一轮新的扩容。然而,在这过程中,一个简单的etcd进程重启操作却触发了一个的诡异的K8s故障(不影响用户开会,影响新一轮后台扩容效
概述在传统单体应用单机部署的情况下,可以使用Java并发处理相关的API(如ReentrantLock或Synchronized)进行互斥控制。在单机环境中,Java中提供了很多并发处理相关的API。但是,随着业务发展的需要,原单体单机部署的系统被演化成分布式集群系统后,由于分布式系统多线程、多进程并且分布在不同机器上,这将使原单机部署情况下的并发控制锁策略失效,单纯的JavaAPI并不能提供分布式锁的能力。为了解决这个问题就需要一种跨JVM的互斥机制来控制共享资源的访问,这就是分布式锁要解决的问题!锁是在执行多线程时用于强行限制资源访问的同步机制,在单机系统上,可以使用Java并发处理相关的
概述在传统单体应用单机部署的情况下,可以使用Java并发处理相关的API(如ReentrantLock或Synchronized)进行互斥控制。在单机环境中,Java中提供了很多并发处理相关的API。但是,随着业务发展的需要,原单体单机部署的系统被演化成分布式集群系统后,由于分布式系统多线程、多进程并且分布在不同机器上,这将使原单机部署情况下的并发控制锁策略失效,单纯的JavaAPI并不能提供分布式锁的能力。为了解决这个问题就需要一种跨JVM的互斥机制来控制共享资源的访问,这就是分布式锁要解决的问题!锁是在执行多线程时用于强行限制资源访问的同步机制,在单机系统上,可以使用Java并发处理相关的
从2020年到现在,对于etcd的技术恐惧持续了很长时间,偶然发现极客时间有一门课程《etcd实战课》,读了下开篇词,深有感触,是时候踏出舒适区,系统性的学习一下etcd了。本文正是对etcd学习的一个总结,从一个新手的角度回顾一下etcd学习的知识点。etcd是什么按照官网的描述,etcd是一个分布式的key-value存储系统。分布式和存储这两个关键字哪个都不简单,组合到一起更是让人望而生畏。如果只是一个简单的key-value存储系统,etcd用不到花这么多年的时间持续的优化。那么在这个key-value的基础上,etcd又扩充了哪些能力,导致etcd给人的感觉这么的复杂呢?etcd的技
从2020年到现在,对于etcd的技术恐惧持续了很长时间,偶然发现极客时间有一门课程《etcd实战课》,读了下开篇词,深有感触,是时候踏出舒适区,系统性的学习一下etcd了。本文正是对etcd学习的一个总结,从一个新手的角度回顾一下etcd学习的知识点。etcd是什么按照官网的描述,etcd是一个分布式的key-value存储系统。分布式和存储这两个关键字哪个都不简单,组合到一起更是让人望而生畏。如果只是一个简单的key-value存储系统,etcd用不到花这么多年的时间持续的优化。那么在这个key-value的基础上,etcd又扩充了哪些能力,导致etcd给人的感觉这么的复杂呢?etcd的技
Etcd是一个高度一致的分布式键值存储,它提供了一种可靠的方式来存储需要由分布式系统或机器集群访问的数据。Etcd比较多的应用场景是用于服务注册与发现(前面文章已经介绍过),除此之外,也可用于键值对存储,应用程序可以读取和写入Etcd中的数据(类似于内存数据库redis),还可用于分布式系统系统的消息发布与订阅,分布式的通知与协调,以及分布式系统中的负载均衡等等。消息发布与订阅在分布式系统中,最适用的一种组件间通信方式就是消息发布与订阅。即构建一个配置共享中心,数据提供者在这个配置中心发布消息,而消息使用者则订阅他们关心的主题,一旦主题有消息发布,就会实时通知订阅者。通过这种方式可以做到分布式
Etcd是一个高度一致的分布式键值存储,它提供了一种可靠的方式来存储需要由分布式系统或机器集群访问的数据。Etcd比较多的应用场景是用于服务注册与发现(前面文章已经介绍过),除此之外,也可用于键值对存储,应用程序可以读取和写入Etcd中的数据(类似于内存数据库redis),还可用于分布式系统系统的消息发布与订阅,分布式的通知与协调,以及分布式系统中的负载均衡等等。消息发布与订阅在分布式系统中,最适用的一种组件间通信方式就是消息发布与订阅。即构建一个配置共享中心,数据提供者在这个配置中心发布消息,而消息使用者则订阅他们关心的主题,一旦主题有消息发布,就会实时通知订阅者。通过这种方式可以做到分布式