草庐IT

Flink写入Redis集群 重写flink-connector-redis包,解决Cluster无法输入密码问题

起因:使用flink的时候难免和redis打交道,相信大家都使用过flink-connector-redis来处理,但是当我想要使用RedisSink写入集群时,发现居然不支持使用密码,于是有了这篇笔记。 事情的经过是这样的,我准备用Flink往Redis写入数据,我照常引入flink-connector-redis包dependency>groupId>org.apache.flinkgroupId>artifactId>flink-connector-redis_2.11artifactId>version>1.1.5version>dependency>然后洋洋洒洒写下如下代码:pack

Flink写入Redis集群 重写flink-connector-redis包,解决Cluster无法输入密码问题

起因:使用flink的时候难免和redis打交道,相信大家都使用过flink-connector-redis来处理,但是当我想要使用RedisSink写入集群时,发现居然不支持使用密码,于是有了这篇笔记。 事情的经过是这样的,我准备用Flink往Redis写入数据,我照常引入flink-connector-redis包dependency>groupId>org.apache.flinkgroupId>artifactId>flink-connector-redis_2.11artifactId>version>1.1.5version>dependency>然后洋洋洒洒写下如下代码:pack

云原生之旅 - 4)基础设施即代码 使用 Terraform 创建 Kubernetes

前言上一篇文章我们已经简单的入门Terraform,本篇介绍如何使用Terraform在GCP和AWS创建Kubernetes资源。Kubernetes在云原生时代的重要性不言而喻,等于这个时代的操作系统,基本上只需要建这个资源,就可以将绝大多数的应用跑在上面,包括数据库,甚至很多团队的大数据处理例如Spark,Flink都跑在Kubernetes上。GCP Kubernetes=GKEAWS Kubernetes= EKSAzure Kubernetes=AKS本篇文章主要介绍前两者的Terraform代码实现,现在使用官方的module要比以前方便太多了,哪怕是新手都可以很快的将资源建起来

云原生之旅 - 4)基础设施即代码 使用 Terraform 创建 Kubernetes

前言上一篇文章我们已经简单的入门Terraform,本篇介绍如何使用Terraform在GCP和AWS创建Kubernetes资源。Kubernetes在云原生时代的重要性不言而喻,等于这个时代的操作系统,基本上只需要建这个资源,就可以将绝大多数的应用跑在上面,包括数据库,甚至很多团队的大数据处理例如Spark,Flink都跑在Kubernetes上。GCP Kubernetes=GKEAWS Kubernetes= EKSAzure Kubernetes=AKS本篇文章主要介绍前两者的Terraform代码实现,现在使用官方的module要比以前方便太多了,哪怕是新手都可以很快的将资源建起来

redis-cluster集群的搭建

redis集群的搭建redis集群的三种模式主从复制哨兵模式cluster集群redis-cluster集群的搭建(在一台linux中搭建,三主三从)下载安装redis5.0.3cd/opt下载redis安装包wgethttp://download.redis.io/releases/redis-5.0.3.tar.gztar-zxvfredis-5.0.3.tar.gz解压make编译cdredis-5.0.3/进入redis文件夹mkdir-p/usr/local/redis-5.0.3创建redis-5.0.3安装文件夹makeinstallPREFIX=/usr/local/redis

redis-cluster集群的搭建

redis集群的搭建redis集群的三种模式主从复制哨兵模式cluster集群redis-cluster集群的搭建(在一台linux中搭建,三主三从)下载安装redis5.0.3cd/opt下载redis安装包wgethttp://download.redis.io/releases/redis-5.0.3.tar.gztar-zxvfredis-5.0.3.tar.gz解压make编译cdredis-5.0.3/进入redis文件夹mkdir-p/usr/local/redis-5.0.3创建redis-5.0.3安装文件夹makeinstallPREFIX=/usr/local/redis

Kubernetes Cluster部署

 1、基本环境说明ip: 192.168.115.149  主机名:node1   CentOSLinuxrelease7.9.2009,内核版本为3.10.0-1160.81.1.el7.x86_64ip: 192.168.115.151   主机名:node2  CentOSLinuxrelease7.9.2009,内核版本为3.10.0-1160.81.1.el7.x86_64ip: 192.168.115.152   主机名:node3   CentOSLinuxrelease7.9.2009,内核版本为3.10.0-1160.81.1.el7.x86_642、安装说明安装方式:yum

Kubernetes Cluster部署

 1、基本环境说明ip: 192.168.115.149  主机名:node1   CentOSLinuxrelease7.9.2009,内核版本为3.10.0-1160.81.1.el7.x86_64ip: 192.168.115.151   主机名:node2  CentOSLinuxrelease7.9.2009,内核版本为3.10.0-1160.81.1.el7.x86_64ip: 192.168.115.152   主机名:node3   CentOSLinuxrelease7.9.2009,内核版本为3.10.0-1160.81.1.el7.x86_642、安装说明安装方式:yum

删库到跑路?还得看这篇Redis数据库持久化与企业容灾备份恢复实战指南

本章目录0x00数据持久化1.RDB方式2.AOF方式如何抉择RDBORAOF?0x01备份容灾一、备份1.手动备份redis数据库2.迁移Redis指定db-数据库3.Redis集群数据备份与迁移二、恢复1.系统Redis用户被删除后配置数据恢复流程2.Kubernetes中单实例异常数据迁移恢复实践3.当Redis集群中出现从节点slave,fail,noaddr问题进行处理恢复流程。前置知识学习补充Redis数据库基础入门介绍与安装-https://blog.weiyigeek.top/2019/4-17-49.htmlRedis数据库基础数据类型介绍与使用-https://blog.w

删库到跑路?还得看这篇Redis数据库持久化与企业容灾备份恢复实战指南

本章目录0x00数据持久化1.RDB方式2.AOF方式如何抉择RDBORAOF?0x01备份容灾一、备份1.手动备份redis数据库2.迁移Redis指定db-数据库3.Redis集群数据备份与迁移二、恢复1.系统Redis用户被删除后配置数据恢复流程2.Kubernetes中单实例异常数据迁移恢复实践3.当Redis集群中出现从节点slave,fail,noaddr问题进行处理恢复流程。前置知识学习补充Redis数据库基础入门介绍与安装-https://blog.weiyigeek.top/2019/4-17-49.htmlRedis数据库基础数据类型介绍与使用-https://blog.w