一、需求前一段时间公司要进行数据转移，将我们ES数据库中的数据转移到客户的服务器上，并且使用定时将新增的数据同步，在这过程中学到了很多，在此记录一下！二、技术栈Mysql+Redis+ElasticSearch+Kafka三、方案为了降低服务器的压力，在每天的零时进行推送数据，推送前比较上一次推送记录在Redis中的数据，此记录为ES数据库中的时间字段，每次推送结束前都会将最新的时间更新在这个key中，如果获取ES数据库中的字段与key一样，说明今日无数据更新。因为ES索引的数据量在千万以上，所以没有选择分页，而是选择了ES的滚轮查询。publicstaticvoidgetDayData(Re
目录一、整合redis1、介绍1.1、redis（RemoteDictionaryServer）1.2、MySQL1.3、区别2、整合2.1、配置2.2、文件配置2.3、key的生成规则方法2.4、注意二、redis注解式缓存1、@Cacheable注解2、@CachePut注解3、@CacheEvict注解4、应用场景三、redis击穿穿透雪崩1、击穿（CacheMiss）2、穿透（CachePenetration）3、雪崩（CacheAvalanche）一、整合redis1、介绍1.1、redis（RemoteDictionaryServer）Redis是一种基于内存的键值存储系统，它将数
这里有一个类似的问题InMemoryOleDbConnectiontoExcelFile但是，这个问题通过另一种方式完全避免了它来回答。下面是一些使用OleDbConnection从磁盘访问Excel文件的示例代码:staticvoidMain(string[]args){StringfilePathToExcelFile="c:\\excelfile.xls";BooleanhasHeaders=true;StringconnectionString=String.Format("Provider=Microsoft.ACE.OLEDB.12.0;DataSource={0};"+"
之前一直用gui连接redis，今天在服务器连接发现redis-cli无法直接连接到redis-sentinel服务器，研究后发现多了几个步骤，如下：假设有三个redis节点127.0.0.1,127.0.0.2,127.0.0.3,端口为9696先连接任意一个节点:redis-cli-h127.0.0.1-p9696查询哨兵节点信息：127.0.0.1:9696>SENTINELget-master-addr-by-nametest_redis7_monitor_7091它会输出哨兵的ip，port连接哨兵先退出redis-cli到bash命令行（ctrl+c或者exit）然后执行redis
将某个字段取出ListString>ids=list.stream().map(Bean::getId).collect(Collectors.toList());List转Map示例GenTabletable=genTableMapper.selectGenTableByName(tableName);ListGenTableColumn>tableColumns=table.getColumns();MapString,GenTableColumn>tableColumnMap=tableColumns.stream().collect(Collectors.toMap(GenTableC
目录Redis的特点和使用场景分布式系统的引入单机系统分布式系统 应用服务器的增多（处理更多的请求）数据库读写分离（数据服务器的增多)引入缓存应对更大的数据量 业务拆分：微服务Redis的特点和使用场景我们先来回顾下我们之前学过的MySQLmysql的数据是存储到硬盘上的，他的读取速度比较慢，但是容量大而Redis则是使用了内存，数据是在内存上，读取速度比较快，但是容量小。这里补充一点：我们一开始学习编程，所了解的变量是存储找内存中。那么既然都是存储到内存中，我们干嘛还要弄一个Redis呢？是这样的——Redis主要是用在分布式系统上的，他可以实现各个进程间数据的通讯，共享，甚至不同主机上的进
目录缓存的定义应用生活案例程序中的缓存 缓存优点 缓存的定义缓存是⼀个高速数据交换的存储器，使用它可以快速的访问和操作数据。 应用1.CPU缓存：CPU缓存是位于CPU和内存之间的临时存储器，它的容量通常远小于内存，但它的访问速度更快。CPU缓存的主要目的是减少CPU从内存中获取数据的次数，从而提高计算机的性能。2.Web浏览器缓存：Web浏览器缓存是指在计算机的硬盘上存储的网页数据副本，当用户再次访问相同的网页时，如果该网页的数据已经在缓存中，那么浏览器可以直接从缓存中读取数据，而不需要重新从网络上下载。3.分布式缓存：分布式缓存是一种将数据缓存在多个服务器上，以提供更快的数据访问速度的技术
简介Stream对对象中的某个日期属性进行排序对日期属性进行排序，并指定日期为空时的策略排序策略nullsFirst():为空时排在最前面nullsLast():为空时排在最后面Comparator.naturalOrder和Comparator.reverseOrder对对象中的多个属性进行排序字符串日期排序对字段进行排序，考虑空值的其他写法简介本文主要讲解Stream对日期字段进行排序时的写法，以及当日期字段为null时的排序策略。或者对多个属性进行排序时的案例Stream对对象中的某个日期属性进行排序Student对象importlombok.Data;importjava.util.D
新增员工功能开发1.新增员工1.1需求分析和设计1.1.1产品原型1.1.2接口设计1.1.3表设计1.2代码开发1.2.1设计DTO类1.2.2Controller层1.2.3Service层接口1.2.4Service层实现类1.2.5Mapper层1.3功能测试1.3.1接口文档测试1.4代码完善1.4.1问题一1.4.2问题二1.4.3ThreadLocal员工管理效果：1.新增员工1.1需求分析和设计1.1.1产品原型后台系统中可以管理员工信息，通过新增员工来添加后台系统用户。新增员工原型：当填写完表单信息,点击"保存"按钮后,会提交该表单的数据到服务端,在服务端中需要接受数据,然后
1、在k8s上部署redis单机1.1、redis简介redis是一款基于BSD协议，开源的非关系型数据库（nosql数据库），作者是意大利开发者SalvatoreSanfilippo在2009年发布，使用C语言编写；redis是基于内存存储，而且是目前比较流行的键值数据库（key-valuedatabase），它提供将内存通过网络远程共享的一种服务，提供类似功能的还有memcache，但相比memcache，redis还提供了易扩展、高性能、具备数据持久性等功能。主要的应用场景有session共享，常用于web集群中的tomcat或PHP中多web服务器的session共享；消息队列，ELK
