草庐IT

mini-cluster

全部标签

redis-cluster集群的搭建

redis集群的搭建redis集群的三种模式主从复制哨兵模式cluster集群redis-cluster集群的搭建(在一台linux中搭建,三主三从)下载安装redis5.0.3cd/opt下载redis安装包wgethttp://download.redis.io/releases/redis-5.0.3.tar.gztar-zxvfredis-5.0.3.tar.gz解压make编译cdredis-5.0.3/进入redis文件夹mkdir-p/usr/local/redis-5.0.3创建redis-5.0.3安装文件夹makeinstallPREFIX=/usr/local/redis

Flink mini-batch "引发" 的乱序问题

问题描述近期业务反馈,开启了mini-batch之后,出现了数据不准的情况,关掉了mini-batch之后,就正常了,因此业务方怀疑,是不是Flink的mini-batch存在bug?问题排查初步分析mini-batch已经在内部大规模使用,目前没有发现一例和开启mini-batch有关,同时mini-batch本质只是将数据进行攒批然后计算,并没有修改核心的运算逻辑.开关mini-batch的关键时数据的批量计算,是否在批量计算使得原本存在bug的代码暴露问题业务在FlinkSQL使用了多个双流join和groupwindow,如果不注意使用,很可能导致乱序,最终的错误结果是某条数据没有被正

Flink mini-batch "引发" 的乱序问题

问题描述近期业务反馈,开启了mini-batch之后,出现了数据不准的情况,关掉了mini-batch之后,就正常了,因此业务方怀疑,是不是Flink的mini-batch存在bug?问题排查初步分析mini-batch已经在内部大规模使用,目前没有发现一例和开启mini-batch有关,同时mini-batch本质只是将数据进行攒批然后计算,并没有修改核心的运算逻辑.开关mini-batch的关键时数据的批量计算,是否在批量计算使得原本存在bug的代码暴露问题业务在FlinkSQL使用了多个双流join和groupwindow,如果不注意使用,很可能导致乱序,最终的错误结果是某条数据没有被正

基于VirutalBox搭建虚拟机间互通的可访问公网的mini主机群

目标在单台PC机上安装3+台虚拟机[1]这些虚拟机间可以相互访问宿主机[2]与虚拟机可以相互访问虚拟机可以访问公网本文将采用NAT+Host-Only双网卡的方式实现上述目标,因为采用这种组合来实现是很简单的,需要做的配置也非常少。前置条件本文仅在以下环境下验证通过,如果您的情况与此有差异,则全文内容仅供参考windows11virtualbox7.0ubuntu18.04另外,需要宿主电脑至少预留40~60G空闲磁盘,用来安装VirtualBox和虚拟机。搭建流程主要有以下几步:安装VirtualBox创建虚拟机并安装Ubuntu系统配置Ubuntu网络 安装VirtualBox下载Virt

基于VirutalBox搭建虚拟机间互通的可访问公网的mini主机群

目标在单台PC机上安装3+台虚拟机[1]这些虚拟机间可以相互访问宿主机[2]与虚拟机可以相互访问虚拟机可以访问公网本文将采用NAT+Host-Only双网卡的方式实现上述目标,因为采用这种组合来实现是很简单的,需要做的配置也非常少。前置条件本文仅在以下环境下验证通过,如果您的情况与此有差异,则全文内容仅供参考windows11virtualbox7.0ubuntu18.04另外,需要宿主电脑至少预留40~60G空闲磁盘,用来安装VirtualBox和虚拟机。搭建流程主要有以下几步:安装VirtualBox创建虚拟机并安装Ubuntu系统配置Ubuntu网络 安装VirtualBox下载Virt

Kubernetes Cluster部署

 1、基本环境说明ip: 192.168.115.149  主机名:node1   CentOSLinuxrelease7.9.2009,内核版本为3.10.0-1160.81.1.el7.x86_64ip: 192.168.115.151   主机名:node2  CentOSLinuxrelease7.9.2009,内核版本为3.10.0-1160.81.1.el7.x86_64ip: 192.168.115.152   主机名:node3   CentOSLinuxrelease7.9.2009,内核版本为3.10.0-1160.81.1.el7.x86_642、安装说明安装方式:yum

Kubernetes Cluster部署

 1、基本环境说明ip: 192.168.115.149  主机名:node1   CentOSLinuxrelease7.9.2009,内核版本为3.10.0-1160.81.1.el7.x86_64ip: 192.168.115.151   主机名:node2  CentOSLinuxrelease7.9.2009,内核版本为3.10.0-1160.81.1.el7.x86_64ip: 192.168.115.152   主机名:node3   CentOSLinuxrelease7.9.2009,内核版本为3.10.0-1160.81.1.el7.x86_642、安装说明安装方式:yum

springboot~redis-cluster动态感应的配置

redis-cluster是一个高可用,可分片的分布式redis集群解决方案,建议使用springboot2.3及以上版本的脚手架,如果是springboot2.3的application.yml相关配置spring:redis:database:0#数据库,每个库由16384(0~16383)槽位组成,实现了库的分片password:xxx@xxx#密码timeout:50000#连接超时时间cluster:nodes:-192.168.4.26:6379-192.168.4.26:6380-192.168.4.26:6479-192.168.4.26:6480-192.168.4.26:6

springboot~redis-cluster动态感应的配置

redis-cluster是一个高可用,可分片的分布式redis集群解决方案,建议使用springboot2.3及以上版本的脚手架,如果是springboot2.3的application.yml相关配置spring:redis:database:0#数据库,每个库由16384(0~16383)槽位组成,实现了库的分片password:xxx@xxx#密码timeout:50000#连接超时时间cluster:nodes:-192.168.4.26:6379-192.168.4.26:6380-192.168.4.26:6479-192.168.4.26:6480-192.168.4.26:6

redis集群搭建 Installing Redis Cluster

简介:Redis的集群模式实现了数据的分布式存储,每个节点存储不同的数据,实现数据动态扩容。优点:无中心节点架构,数据按照slot分布在多个节点上缺点:不支持多数据库 1、安装包准备  1、redis-4.0.1.tar.gz redis源文件    下载地址:https://download.redis.io/releases/redis-4.0.1.tar.gz  2、ruby-2.5.9.tar.gz ruby安装包2、安装机器准备  三台机器:192.168.43.120 192.168.43.130 192.168.43.140  3主3从,每台机器两个节点 3、目录创建和redis