草庐IT

中兴通讯

全部标签

wireguard-跨云or vpc网络通讯方案

背景:早期服务器集中于腾讯云,开始是传统网络。后面是自定义的私有网络vpc.当然了vpc中还有容器网络,容器的网络方案使用了默认的GlobalRouter,并没有使用VPC-CNI的容器网络与云主机网络在同一个VPC内的方案(腾讯云官方文档还有了Cilium-Overlay的方案,恩还有个测试环境的k8s集群是kubeadm自建的集群网络插件用的cilum).今年45月份有些新业务又跑在了阿里云上面,集群环境直接用了阿里云的ACKPRO。网络插件使用了Flannel,也没有使用阿里云的Terway。现在的需求就是要把两个网络打通!看了一下网上的各种方案:1.腾讯云与阿里云如何建立VPN连接(不

wireguard-跨云or vpc网络通讯方案

背景:早期服务器集中于腾讯云,开始是传统网络。后面是自定义的私有网络vpc.当然了vpc中还有容器网络,容器的网络方案使用了默认的GlobalRouter,并没有使用VPC-CNI的容器网络与云主机网络在同一个VPC内的方案(腾讯云官方文档还有了Cilium-Overlay的方案,恩还有个测试环境的k8s集群是kubeadm自建的集群网络插件用的cilum).今年45月份有些新业务又跑在了阿里云上面,集群环境直接用了阿里云的ACKPRO。网络插件使用了Flannel,也没有使用阿里云的Terway。现在的需求就是要把两个网络打通!看了一下网上的各种方案:1.腾讯云与阿里云如何建立VPN连接(不

Spark 通讯架构和调度

1、Spark通讯架构1.1Spark通信架构概述Spark2.x版本使用Netty通讯框架作为内部通讯组件。spark基于netty新的rpc框架借鉴了Akka的中的设计,它是基于Actor模型,如下图所示:图Actor模型Spark通讯框架中各个组件(Client/Master/Worker)可以认为是一个个独立的实体,各个实体之间通过消息来进行通信。具体各个组件之间的关系图如下:图Spark通讯架构Endpoint(Client/Master/Worker)有1个InBox和N个OutBox(N>=1,N取决于当前Endpoint与多少其他的Endpoint进行通信,一个与其通讯的其他E

Spark 通讯架构和调度

1、Spark通讯架构1.1Spark通信架构概述Spark2.x版本使用Netty通讯框架作为内部通讯组件。spark基于netty新的rpc框架借鉴了Akka的中的设计,它是基于Actor模型,如下图所示:图Actor模型Spark通讯框架中各个组件(Client/Master/Worker)可以认为是一个个独立的实体,各个实体之间通过消息来进行通信。具体各个组件之间的关系图如下:图Spark通讯架构Endpoint(Client/Master/Worker)有1个InBox和N个OutBox(N>=1,N取决于当前Endpoint与多少其他的Endpoint进行通信,一个与其通讯的其他E