草庐IT

Elasticsearch之聚合查询介绍与使用(附RestAPI代码案例)

小威要向诸佬学习呀 2023-05-17 原文

前言:大家好,我是小威,24届毕业生,在一家满意的公司实习。本篇文章将介绍Elasticsearch搜索引擎之聚合查询的介绍与使用,这块内容不作为面试中的重点。
如果文章有什么需要改进的地方还请大佬不吝赐教👏👏。
小威在此先感谢各位大佬啦~~🤞🤞

🏠个人主页:小威要向诸佬学习呀
🧑个人简介:大家好,我是小威,一个想要与大家共同进步的男人😉😉
目前状况🎉:24届毕业生,在一家满意的公司实习👏👏

💕欢迎大家:这里是CSDN,我总结知识的地方,欢迎来到我的博客,我亲爱的大佬😘

聚合提供了从数据中分组和提取数据的能力。最简单的聚合方法大致等于 SQL GROUP BY 和 SQL 聚合函数。在 Elasticsearch 中,执行搜索会返回 hits(命中结果),并且同时返回聚合结果,把一个响应中的所有 hits(命中结果)分隔开的能力。这是非常强大且有效的,我们可以执行查询和多个聚合,并且在一次使用中得到各自的(任何一个的)返回结果,使用一次简洁和简化的 API 来避免网络往返。

聚合是以实现对文档数据的统计,分析,计算,另外,参与聚合的字段类型必须为keyword,数值,日期等类型。不可为text类型。聚合常见的种类有如下:

  • Bucket(桶聚合):可以用来对文档进行分组。如:TermAggregation按照文档字段值做分组,Date histogram按照日期阶梯分组,例如一周,一月,一季为一组。
  • Metric(度量聚合):用来对文档数据进行计算,如Avg求平均值,Max求最大值,Stats同时求max,min,avg等。
  • Pipeline(管道聚合):以其他聚合结果为基础的聚合。

栗子:统计所有数据中的酒店种类,可以根据酒店品牌的名称做聚合,如下DSL语句:

GET /hotel/_search
{
  "size": 0,
  "aggs": {
    "brandAgg": {  
      "terms": {
        "field": "brand",
        "size": 10
      }
    }
  }
}


点击运行,得到如下聚合结果:

同时可以限定聚合查询的范围,如对价格大于200的酒店做聚合查询:

# 限定范围内的聚合查询
GET /hotel/_search
{
  "query": {
    "range": {
      "price": {
        "lte": 200
      }
    }
  }, 
  "size": 0,
  "aggs": {
    "brandAgg": {  
      "terms": {
        "field": "brand",
        "size": 20,
        "order": {
          "_count": "asc"
        }
      }
    }
  }
}

由上述代码可以看出,aggs代表聚合,与query查询同级,且query可以限定聚合的文档范围。

Metric度量聚合

栗子:获取每个品牌用户评价的最大值,最小值和平均值等,如下DSL语句:

# 嵌套聚合metric
GET /hotel/_search
{
  "size": 0,
  "aggs": {
    "brandAgg": {
      "terms": {
        "field": "brand",
        "size": 10
        , "order": {
          "scoreAgg.avg": "desc"
        }
      },
      "aggs": {
        "scoreAgg": {
          "stats": {
            "field": "score"
          }
        }
      }
    }
  }
}

运行结果如下:

根据品牌做分类的Java代码,使用RestAPI实现聚合代码如下:

Java语言RestAPI如下:

        @Test
        void testAggregation() throws IOException {
            SearchRequest request = new SearchRequest("hotel");
            //设置文档的查询条数
            request.source().size(0);
            //聚合条件,按照brand字段进行分组
            request.source().aggregation(AggregationBuilders.terms("brandAgg").field("brand").size(10));
            //发出请求
            SearchResponse response = client.search(request, RequestOptions.DEFAULT);
            //解析得到的结果
            Aggregations aggregations = response.getAggregations();
            //根据名称获取聚合结果
            Terms brandTerms = aggregations.get("brandAgg");
            //获取桶结果集合
            List<? extends Terms.Bucket> buckets = brandTerms.getBuckets();
            if(!CollectionUtils.isEmpty(buckets)){
                for (Terms.Bucket bucket : buckets) {
                    //解析桶内的名称
                    String key = bucket.getKeyAsString();
                    //打印输出桶内的酒店名字
                    System.out.println(key);
                }
            }
        }


除了根据品牌分类,根据多个字段进行查询也是如此,多加几个字段,循环剖析结果值取值即可。

图书推荐

Linux操作系统是目前最为流行的一款开源操作系统,从服务器系统到嵌入式设备,Linux的身影无处不在。云计算、物联网、大数据、人工智能等一系列技术领域,其背后同样离不开Linux。现如今,越来越多的开发者以及爱好者投入了Linux系统维护和Linux系统编程等领域。然而,Linux因其复杂性,让无数新手望而却步。

技术的学习之路大多是艰难而枯燥的, Linux系统编程的学习之路更是困难重重。一方面,它需要我们了解基本的编程技术,特别是C语言编程技术;另一方面,它还需要我们了解Linux操作系统的底层技术知识。

进程是如何创建的?

进程间是如何进行通信的?

文件系统是如何运行的?

systemd是如何管理守护进程的?

如何编写静态库与动态库?

编译器是如何工作的?

如何对程序进行调试?……

一系列技术问题让人应接不暇。

如何了解Linux操作系统?

如何在Linux系统下进行编程开发?

从什么地方开始着手学习?

这些问题困扰了很多人,让人踟蹰不前,不知如何下手,这本《Linux系统编程》会给予大家一些指引。

从Linux开发环境的安装与配置,到编写第一个Linux小程序,再到编译器工作原理、进程与线程、动态库、文件系统以及进程间通信等一系列与Linux系统编程密切相关的主题内容,本书由浅入深,层层递进,一步一步地引导着大家步入Linux系统编程的大门。

本书的内容非常丰富,但书中并没有晦涩难懂的纯理论堆砌,大家无须担心会迷失在技术的海洋中。只需要跟随作者的脚步,在一页页文字的指引下,去编码,去思考,去融会贯通。书中的每一小节都包含详细的准备工作和实践步骤,可以快速地开始编码,上手操作,并且在实际编码中体会Linux系统编程的奥秘。同时,在实践操作基础之上,作者会对实践环节中的代码程序进行深入细致的理论知识介绍,包括每段代码所涉及的核心技术、其背后的工作原理以及其中所体现的Linux编程思想,让大家既能“知其然”,又能“知其所以然”。在理论与实践的密切结合中,都能有所收获。

收获什么

学完本书,你将能够在Linux系统中开发自己的系统程序,包括守护进程、工具、客户端和过滤器。通过阅读本书,你将:

  • 了解如何使用各种系统调用为Linux系统编写程序。
  • 深入研究POSIX函数的工作原理。
  • 理解并学会使用信号、管道、IPC和流程管理等关键概念。
  • 了解如何集成程序与Linux系统。
  • 探索高级主题,例如,文件系统操作、创建共享库和调试程序。
  • 全面了解如何使用Valgrind调试程序。

主要内容

  • 第1章向你展示如何安装本书中所需的工具。同时,在该章中,我们还编写了第一个
    程序。
  • 第2章介绍我们应该如何(以及为什么)使程序易于脚本化,并易于被系统上的其他程序所使用。
  • 第3章带领我们深入了解Linux中C编程的内部工作原理。我们将学习如何使用系统调用、编译器的工作原理、如何使用Make工具、如何指定不同的C标准,等等。
  • 第4章向我们展示如何优雅地处理错误。
  • 第5章介绍如何使用文件描述符和流来进行文件的读取和写入。该章还介绍了如何使用系统调用来创建和删除文件以及读取文件权限。
  • 第6章介绍如何创建进程、如何创建守护进程、什么是父进程,以及如何将作业发送到后台和前台。
  • 第7章向我们展示如何将守护进程置于systemd的控制之下。该章还教我们如何将日志写入systemd的日志以及如何读取这些日志。
  • 第8章向我们展示什么是共享库、为什么它们很重要,以及如何创建自己的共享库。
  • 第9章介绍如何以不同的方式修改终端,例如,如何禁用密码提示的回显。
  • 第10章介绍关于IPC的内容,即如何使进程在系统上相互通信,内容包括FIFO、UNIX套接字、消息队列、管道和共享内存。
  • 第11章解释什么是线程、如何编写线程化程序、如何避免竞态条件,以及如何优化线程化程序。
  • 第12章介绍使用GDB和Valgrind进行调试。

京东购买链接:点击跳转

评论区任意留言可参与活动抽奖(评论最多三条,抽取四名欧皇)

好了,本篇文章就先分享到这里了,后续会继续分享其他方面的知识,感谢大佬认真读完支持咯~

文章到这里就结束了,如果有什么疑问的地方请指出,诸佬们一起讨论😁
希望能和诸佬们一起努力,今后我们顶峰相见🍻
再次感谢各位小伙伴儿们的支持🤞

有关Elasticsearch之聚合查询介绍与使用(附RestAPI代码案例)的更多相关文章

  1. ruby - 如何使用 Nokogiri 的 xpath 和 at_xpath 方法 - 2

    我正在学习如何使用Nokogiri,根据这段代码我遇到了一些问题:require'rubygems'require'mechanize'post_agent=WWW::Mechanize.newpost_page=post_agent.get('http://www.vbulletin.org/forum/showthread.php?t=230708')puts"\nabsolutepathwithtbodygivesnil"putspost_page.parser.xpath('/html/body/div/div/div/div/div/table/tbody/tr/td/div

  2. ruby - 使用 RubyZip 生成 ZIP 文件时设置压缩级别 - 2

    我有一个Ruby程序,它使用rubyzip压缩XML文件的目录树。gem。我的问题是文件开始变得很重,我想提高压缩级别,因为压缩时间不是问题。我在rubyzipdocumentation中找不到一种为创建的ZIP文件指定压缩级别的方法。有人知道如何更改此设置吗?是否有另一个允许指定压缩级别的Ruby库? 最佳答案 这是我通过查看ruby​​zip内部创建的代码。level=Zlib::BEST_COMPRESSIONZip::ZipOutputStream.open(zip_file)do|zip|Dir.glob("**/*")d

  3. ruby - 为什么我可以在 Ruby 中使用 Object#send 访问私有(private)/ protected 方法? - 2

    类classAprivatedeffooputs:fooendpublicdefbarputs:barendprivatedefzimputs:zimendprotecteddefdibputs:dibendendA的实例a=A.new测试a.foorescueputs:faila.barrescueputs:faila.zimrescueputs:faila.dibrescueputs:faila.gazrescueputs:fail测试输出failbarfailfailfail.发送测试[:foo,:bar,:zim,:dib,:gaz].each{|m|a.send(m)resc

  4. ruby-on-rails - 使用 Ruby on Rails 进行自动化测试 - 最佳实践 - 2

    很好奇,就使用ruby​​onrails自动化单元测试而言,你们正在做什么?您是否创建了一个脚本来在cron中运行rake作业并将结果邮寄给您?git中的预提交Hook?只是手动调用?我完全理解测试,但想知道在错误发生之前捕获错误的最佳实践是什么。让我们理所当然地认为测试本身是完美无缺的,并且可以正常工作。下一步是什么以确保他们在正确的时间将可能有害的结果传达给您? 最佳答案 不确定您到底想听什么,但是有几个级别的自动代码库控制:在处理某项功能时,您可以使用类似autotest的内容获得关于哪些有效,哪些无效的即时反馈。要确保您的提

  5. ruby - 在 Ruby 中使用匿名模块 - 2

    假设我做了一个模块如下:m=Module.newdoclassCendend三个问题:除了对m的引用之外,还有什么方法可以访问C和m中的其他内容?我可以在创建匿名模块后为其命名吗(就像我输入“module...”一样)?如何在使用完匿名模块后将其删除,使其定义的常量不再存在? 最佳答案 三个答案:是的,使用ObjectSpace.此代码使c引用你的类(class)C不引用m:c=nilObjectSpace.each_object{|obj|c=objif(Class===objandobj.name=~/::C$/)}当然这取决于

  6. ruby - 使用 ruby​​ 和 savon 的 SOAP 服务 - 2

    我正在尝试使用ruby​​和Savon来使用网络服务。测试服务为http://www.webservicex.net/WS/WSDetails.aspx?WSID=9&CATID=2require'rubygems'require'savon'client=Savon::Client.new"http://www.webservicex.net/stockquote.asmx?WSDL"client.get_quotedo|soap|soap.body={:symbol=>"AAPL"}end返回SOAP异常。检查soap信封,在我看来soap请求没有正确的命名空间。任何人都可以建议我

  7. python - 如何使用 Ruby 或 Python 创建一系列高音调和低音调的蜂鸣声? - 2

    关闭。这个问题是opinion-based.它目前不接受答案。想要改进这个问题?更新问题,以便editingthispost可以用事实和引用来回答它.关闭4年前。Improvethisquestion我想在固定时间创建一系列低音和高音调的哔哔声。例如:在150毫秒时发出高音调的蜂鸣声在151毫秒时发出低音调的蜂鸣声200毫秒时发出低音调的蜂鸣声250毫秒的高音调蜂鸣声有没有办法在Ruby或Python中做到这一点?我真的不在乎输出编码是什么(.wav、.mp3、.ogg等等),但我确实想创建一个输出文件。

  8. ruby-on-rails - 'compass watch' 是如何工作的/它是如何与 rails 一起使用的 - 2

    我在我的项目目录中完成了compasscreate.和compassinitrails。几个问题:我已将我的.sass文件放在public/stylesheets中。这是放置它们的正确位置吗?当我运行compasswatch时,它不会自动编译这些.sass文件。我必须手动指定文件:compasswatchpublic/stylesheets/myfile.sass等。如何让它自动运行?文件ie.css、print.css和screen.css已放在stylesheets/compiled。如何在编译后不让它们重新出现的情况下删除它们?我自己编译的.sass文件编译成compiled/t

  9. ruby - ECONNRESET (Whois::ConnectionError) - 尝试在 Ruby 中查询 Whois 时出错 - 2

    我正在用Ruby编写一个简单的程序来检查域列表是否被占用。基本上它循环遍历列表,并使用以下函数进行检查。require'rubygems'require'whois'defcheck_domain(domain)c=Whois::Client.newc.query("google.com").available?end程序不断出错(即使我在google.com中进行硬编码),并打印以下消息。鉴于该程序非常简单,我已经没有什么想法了-有什么建议吗?/Library/Ruby/Gems/1.8/gems/whois-2.0.2/lib/whois/server/adapters/base.

  10. ruby - 使用 ruby​​ 将 HTML 转换为纯文本并维护结构/格式 - 2

    我想将html转换为纯文本。不过,我不想只删除标签,我想智能地保留尽可能多的格式。为插入换行符标签,检测段落并格式化它们等。输入非常简单,通常是格式良好的html(不是整个文档,只是一堆内容,通常没有anchor或图像)。我可以将几个正则表达式放在一起,让我达到80%,但我认为可能有一些现有的解决方案更智能。 最佳答案 首先,不要尝试为此使用正则表达式。很有可能你会想出一个脆弱/脆弱的解决方案,它会随着HTML的变化而崩溃,或者很难管理和维护。您可以使用Nokogiri快速解析HTML并提取文本:require'nokogiri'h

随机推荐