文章目录@[toc]1.问题2.Es索引的mapping模式2.1dynamic动态宽松模式（动态映射）2.2strict严格模式（静态映射）3.text类型和keyword类型的区别3.1text类型3.2keyword类型4.正确姿势5.总结1.问题 由于之前搞了一个使用flink-cdc将mysql表中的数据同步到es的索引中，例子中数据库中的orders表中的order_date的字段类型是datetime类型，flink-sql建表orders、enriched_orders中的order_date字段是TIMESTAMP(0)类型，同步到es的enriched_orders索引中
外部无法访问ES的解决方案：打开Elasticsearch安装路径下config目录下的elasticsearch.yml文件，加入如下配置：discovery.seed_hosts:["host1"]network.host:0.0.0.0 重新启动ES即可。PS：如果修改配置文件后，启动报错maxfiledescriptors[4096]forelasticsearchprocessistoolow,increasetoatleast[65536]，解决方案如下：编辑/etc/security/limits.conf，添加以下内容；* soft nofile 65536* hard nof
查询ES报错：429TooManyRequests；circuit_breaking_exception，”reason”:”[parent]Datatoolarge,datafor[]“问题：ES查询报错：429TooManyRequests；circuit_breaking_exception，“reason”:“[parent]Datatoolarge,datafor[]”原因：ES查询缓存占用内存过大，超过阈值（默认70%），查询请求拒绝。解决：1.清除es缓存2.修改缓存阈值限制修改ES查询缓存占用比例限制PUT/_cluster/settings{"persistent":{"in
springboot-ES多数据源链接\Spring-Data-ES连接多个ES集群本文为文章转载；原文地址已经置于文章尾部一、背景二、创建原理三、核心类四、实际代码1、配置文件application.properties2、集群1：配置类C1ElasticsearchProperties3、集群1：创建ES连接的类C1ElasticsearchAutoConfiguration4、集群1：创建模版的类C1ElasticsearchDataAutoConfiguration5、集群2：配置类:C2ElasticsearchProperties6、集群2：创建ES连接的类:C2Elasticse
目录一、事故经过二、事故原因 三、问题总结四、后续处理方案一、事故经过12月8日早上8点左右发现系统不停报错，报错信息如下：amnOkN_kRXGMwU3qmULUxA,primaryterm:1onEsThreadPoolExecutor[name=node10.18.47.130-data/write,queuecapacity=200,org.elasticsearch.common.util.concurrent.EsThreadPoolExecutor@e4f2d50[Running,poolsize=48,activethreads=48,queuedtasks=216,compl
searchAfter简单来说就是将from。。。size中的from用searchAfter的sort字段表示，通过不断更新此sort字段实现向下滚动效果。但是和from不同的是对数据更新不敏感。searchafter官网介绍使用search_after时要求你的query值和sort值相同。更具体点是要求你的字段相同，你可以修改它的逻辑，比如你可以查时间为a的数据，那么你将逻辑改为比a大或者比a小都可以，但是你的逻辑必须是时间。sort同理，你可以升序也可以降序但你用来排序的字段不要变。search-after使用需知：1使用search-after时不要修改你的query和sort字段2
searchAfter简单来说就是将from。。。size中的from用searchAfter的sort字段表示，通过不断更新此sort字段实现向下滚动效果。但是和from不同的是对数据更新不敏感。searchafter官网介绍使用search_after时要求你的query值和sort值相同。更具体点是要求你的字段相同，你可以修改它的逻辑，比如你可以查时间为a的数据，那么你将逻辑改为比a大或者比a小都可以，但是你的逻辑必须是时间。sort同理，你可以升序也可以降序但你用来排序的字段不要变。search-after使用需知：1使用search-after时不要修改你的query和sort字段2
第一章ES简介第1节ES介绍12341、Elasticsearch是一个基于Lucene的搜索服务器2、提供了一个分布式的全文搜索引擎,基于restfulweb接口3、Elasticsearch是用Java语言开发的，基于Apache协议的开源项目，是目前最受欢迎的企业搜索引擎4、Elasticsearch广泛运用于云计算中，能够达到实时搜索，具有稳定，可靠，快速的特点第2节ES版本版本历史1ES:1.x--->2.x--->5.x--->6.x--->7.x（目前）版本选择1在版本选择一般选择5.x版本以上,我们本课程的学习使用6.x版本,低版本会随着官网的不断推动,在未来可能就不维护了,所
第一章ES简介第1节ES介绍12341、Elasticsearch是一个基于Lucene的搜索服务器2、提供了一个分布式的全文搜索引擎,基于restfulweb接口3、Elasticsearch是用Java语言开发的，基于Apache协议的开源项目，是目前最受欢迎的企业搜索引擎4、Elasticsearch广泛运用于云计算中，能够达到实时搜索，具有稳定，可靠，快速的特点第2节ES版本版本历史1ES:1.x--->2.x--->5.x--->6.x--->7.x（目前）版本选择1在版本选择一般选择5.x版本以上,我们本课程的学习使用6.x版本,低版本会随着官网的不断推动,在未来可能就不维护了,所
Datax同步MySQL到ES1、在MySQL中建表2、在ES建立索引3、构建从MySQL到ES的Datax的Json任务4、运行mysql2es.json脚本以下是工作中做过的ETL，如有需要，可以私信沟通交流，互相学习，一起进步1、在MySQL中建表建表语句CREATETABLE`user`(`id`int(11)NOTNULL,`name`varchar(255)DEFAULTNULL,`age`varchar(255)DEFAULTNULL,`create_date`datetimeDEFAULTNULL,PRIMARYKEY(`id`))ENGINE=InnoDBDEFAULTCHA
