草庐IT

ES+Redis+MySQL,这个高可用架构设计太顶了

一、背景会员系统是一种基础系统,跟公司所有业务线的下单主流程密切相关。如果会员系统出故障,会导致用户无法下单,影响范围是全公司所有业务线。所以,会员系统必须保证高性能、高可用,提供稳定、高效的基础服务。随着同程和艺龙两家公司的合并,越来越多的系统需要打通同程APP、艺龙APP、同程微信小程序、艺龙微信小程序等多平台会员体系。例如微信小程序的交叉营销,用户买了一张火车票,此时想给他发酒店红包,这就需要查询该用户的统一会员关系。因为火车票用的是同程会员体系,酒店用的是艺龙会员体系,只有查到对应的艺龙会员卡号后,才能将红包挂载到该会员账号。除了上述讲的交叉营销,还有许多场景需要查询统一会员关系,例如

搭建WebDAV服务手机ES文件浏览器远程访问

文章目录1.安装启用WebDAV2.安装cpolar3.配置公网访问地址4.公网测试连接5.固定连接公网地址6.使用固定地址测试连接有时候我们想通过移动设备访问群晖NAS中的文件,以满足特殊需求,我们在群辉中开启WebDav服务,结合cpolar内网工具生成的公网地址,通过移动客户端ES文件浏览器即可实现移动设备远程访问NAS文件,下面介绍步骤1.安装启用WebDAV在群晖套件中心,我们搜索webdav,找到且点击安装套件(如已安装可以忽略这一步)[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-ILxP0vmw-1692107237774)(https://ima

ES 批量删除数据

如果ES存储的数据特别多,在查询时会非常缓慢,还浪费存储。可以通过DeleteByQuery的方式,删除掉不需要的数据。基本操作案例//删除version_value字段为64181的数据//log_xxx_*后面的是通配符POST/log_xxx_*/_delete_by_query{"query":{"bool":{"must":[{"match":{"version_value":64181}}]}}}POST/log_xxx_2022_10_20/_delete_by_query{"query":{"bool":{"must":[{"exists":{"field":"version_

Linux 服务器上使用Docker部署ES

SprintBoot和Elasticsearch对应版本:SpringDataElasticsearch-ReferenceDocumentation准备docker-compose文件,docker仓库请看:DockerHubversion:'3'services:elasticsearch:image:elasticsearch:7.16.1restart:alwayshostname:es1_devcontainer_name:es_devvolumes:-/home/es-7.16.1/data:/usr/share/elasticsearch/data-/home/es-7.16.1

k8s部署es集群和kibana

文章目录一、创建命名空间elk二、安装NFS三、创建StorageClass四、创建es有状态服务es-cluster.yaml五、创建es服务es-service.yaml六、检查es集群七、部署kibana八、访问kibana九、参考文章一、创建命名空间elkkubectlcreatenselk二、安装NFSubuntu16.04.4部署NFS共享mkdir/nfs_data/eschmod-R777/nfs_data/esvim/etc/exports#添加如下内容/nfs_data/es192.168.0.0/16(rw,sync,no_subtree_check,no_root_sq

ES7 集群模式新增账号密码认证

elasticsearch7中开始免费了账号密码认证功能,下面是xpack方式开启集群密码认证1.在es的任一节点下生成p12文件,在es目录下执行命令./bin/elasticsearch-certutilca-outconfig/elastic-certificates.p12-pass""2.生成p12文件后,将p12文件复制到其他节点的机器中,尽量保持p12的目录路径一致3.在所有节点的esconfig目录下的elasticsearch.yml文件新增如下配置(注意p12文件的目录路径):xpack.security.enabled:truexpack.security.transpo

CSDN 直播:腾讯云大数据 ES 结合 AI 大模型与向量检索的新一代云端检索分析引擎 8月-8号 19:00-20:30

本次沙龙围绕腾讯云大数据ES产品展开,重点介绍了腾讯云ES自研的存算分离技术,以及能与AI大模型和文本搜索深度结合的高性能向量检索能力。同时,本次沙龙还将为我们全方位介绍腾讯云ES重磅推出的ElasticsearchServerless服务,期待其自动弹性、完全免运维的特性,能够帮助企业在快速上云的同时实现降本增效。直播链接 腾讯云大数据ES结合AI大模型与向量检索的新一代云端检索分析引擎-CSDN直播敬请大家的参与 

【ES】报错:[terms] unknown token [END_ARRAY] after

报错内容 terms]unknowntoken[END_ARRAY]after 原因  从Map获取的value是Object类型,然后直接赋值给termsQuery了。应该先将value显式转换类型为容器类型,比如boolQueryBuilder.must(QueryBuilders.termsQuery(entry.getKey(),(Collection)entry.getValue()));

es8.8 集群安装笔记

es8.8集群安装笔记配置集群第一步修改配置文件本次安装使用centos83节点安装:192.168.182.142192.168.182.143192.168.182.144官网可以查看详细的安装,安装步骤比较简单https://www.elastic.co/guide/en/elasticsearch/reference/8.8/rpm.html#rpm-repo直接安装,需要配置仓库cd/etc/yum.repos.d/vielasticsearch.repo[elasticsearch]name=Elasticsearchrepositoryfor8.xpackagesbaseurl=

ES索引以及映射关系的创建,查询,删除。

1创建索引PUT/lagou-company-indexPUT/索引名称{“settings”:{“属性名”:“属性值”}}settings:就是索引库设置,其中可以定义索引库的各种属性比如分片数副本数等,目前我们可以不设置,都走默认**2查询索引数据GET/lagou-company-index**3批量查询索引数据GET/lagou-company-index,lagou-employee-index4查看索引的状态GET/_cat/indices?v绿色:索引的所有分片都正常分配。黄色:至少有一个副本没有得到正确的分配。红色:至少有一个主分片没有得到正确的分配5验证索引是否创建成功HEA