1.ES概述 　　ES全称为"ElasticSewrch",是一个基于RESTfulweb接口,并且构建在ApacheLucene之上的开源分布式搜索引擎。 　　ES可以在极短的时间内存储、搜索和分析大量的数据。通常作为具有复杂搜索场景情况下的核心发动机。 　　简单来说,ES可以帮助我们快速完成海量数据的搜索工作。 　　2.场景介绍 　　在实际开发中,为了保证数据的安全性和持久性,所以,我们一般会把数据存储的数据库中,比如mysql数据库。 　　但,如果数据量比较大,并且搜索业务比较多,则需要使用ES来实现我们的搜索功能。 　　而ES所实现的搜索,需要把数据放入ES中,才能实现,所以,就需要

问题场景：1，使用BulkRequest写入索引数据不生效，接口正常返回，索引没有数据。先看原始代码：@OverridepublicResultMsgsaveRealtimeMsg(IMRealTimeMessageDTOimRealTImeMessageDTO){try{//1.创建批量导入数据BulkRequestbulkRequest=newBulkRequest();Stringindex=elasticSearchConfig.getImRealtimeIndex();//2.将数据批量添加for(IMRealTimeMessageEntityentity:imRealTImeMes

问题场景：1，使用BulkRequest写入索引数据不生效，接口正常返回，索引没有数据。先看原始代码：@OverridepublicResultMsgsaveRealtimeMsg(IMRealTimeMessageDTOimRealTImeMessageDTO){try{//1.创建批量导入数据BulkRequestbulkRequest=newBulkRequest();Stringindex=elasticSearchConfig.getImRealtimeIndex();//2.将数据批量添加for(IMRealTimeMessageEntityentity:imRealTImeMes

failedtoexecutepipelineforabulkrequest问题客户使用场景是使用第三方工具大批量往ES写入数据，报错写入失败，需排查。已知情况：当前环境各组件运行正常，数据由HBase侧不停写入ES索引主分片数10个，副本1个ESHEAP设置是8GB，JVM内存资源较为紧张问题分析：查报错日志推断是写入侧推送数据过快，ES处理能力不足导致！解决办法：常规场景下应该下调往ES推送的数据大小或频率。增大ES的内存，现场距离ES内存峰值30GB仍有很大空间。考虑线程池过小导致，参考后面章节。实际处理：略微下调主分片个数使其均匀分布（10->8），将索引的副本数从1减为0，相当于写入

failedtoexecutepipelineforabulkrequest问题客户使用场景是使用第三方工具大批量往ES写入数据，报错写入失败，需排查。已知情况：当前环境各组件运行正常，数据由HBase侧不停写入ES索引主分片数10个，副本1个ESHEAP设置是8GB，JVM内存资源较为紧张问题分析：查报错日志推断是写入侧推送数据过快，ES处理能力不足导致！解决办法：常规场景下应该下调往ES推送的数据大小或频率。增大ES的内存，现场距离ES内存峰值30GB仍有很大空间。考虑线程池过小导致，参考后面章节。实际处理：略微下调主分片个数使其均匀分布（10->8），将索引的副本数从1减为0，相当于写入

        项目需要，记录一次ELK日志分析系统无坑初始安装过程，并给大家整理出了操作elasticsearch的主要命令，elasticsearch！伙伴们都懂得哦！别的不多说，看过内容概览，直接开整！！！一、系统调优 1-1修改/etc/security/limits.conflimits.conf文件限制着用户可以使用的最大文件数，最大线程，最大内存等资源使用量，在最后追加内容： *hardnofile65535 #*允许es启动用户*softnofile65535es-nproc4096    #es可以当启动用户启动用户说明：soft是一个警告值，而hard则是一个真正意义的阀值

        项目需要，记录一次ELK日志分析系统无坑初始安装过程，并给大家整理出了操作elasticsearch的主要命令，elasticsearch！伙伴们都懂得哦！别的不多说，看过内容概览，直接开整！！！一、系统调优 1-1修改/etc/security/limits.conflimits.conf文件限制着用户可以使用的最大文件数，最大线程，最大内存等资源使用量，在最后追加内容： *hardnofile65535 #*允许es启动用户*softnofile65535es-nproc4096    #es可以当启动用户启动用户说明：soft是一个警告值，而hard则是一个真正意义的阀值

目录一、下载ES单机安装 二、安装插件​ 三、分布式安装参考资料一、下载ES单机安装1.下载地址：DownloadElasticsearch|Elastic2.下载后目录说明  3.启动报错highdiskwatermark[90%]exceededonElasticSerach出现highdiskwatermark[90%]exceededon_weixiao_920的博客-CSDN博客Elasticsearch：Highdiskwatermark_Elastic中国社区官方博客-CSDN博客 上述操作依旧失败，8.0arch64启动失败，所以改成7.17.0成功 二、安装插件1.下载插件：

目录一、下载ES单机安装 二、安装插件​ 三、分布式安装参考资料一、下载ES单机安装1.下载地址：DownloadElasticsearch|Elastic2.下载后目录说明  3.启动报错highdiskwatermark[90%]exceededonElasticSerach出现highdiskwatermark[90%]exceededon_weixiao_920的博客-CSDN博客Elasticsearch：Highdiskwatermark_Elastic中国社区官方博客-CSDN博客 上述操作依旧失败，8.0arch64启动失败，所以改成7.17.0成功 二、安装插件1.下载插件：

java中es的QueryBuilder的构建方式这里只列举经常使用的，都是基于boolQuery查询。1.查询list条件termsQuery，常用于状态值，id等2.查询单个条件 termQuery，常用于字符串查询，如名称等3.查询范围 rangeQuery，常用于一个范围查询，如价格区间等4.搜索词拆分模糊查询matchQuery，常用于内容检索，如文章内容等5.子查询 hasChildQuery，子查询最好用should连接publicQueryBuildergetQueryBuilder(SaasSearchBeansearchBean){   //去构建一个BoolQueryBu