草庐IT

Elasticsearch语法知多少之Range query

我的身前一尺是我的世界 2024-05-15 原文

目录

目标

ES版本信息

官方文档

相关术语

创建相关的索引和文档(数据用于实战案例)

创建索引

索引文档

实战

基本语法

检查时间范围的方法

查询今天的数据(精确单位:日)

查询今天的数据(精确单位:小时)

查询今天的数据(精确单位:分钟)

查询今天的数据(精确单位:秒)

查询最近一周的数据

查询最近一月的数据

查询最近一年的数据


目标

熟悉ES范围查询,重点列举一些对日期和时间搜索的案例,旨在解决UTC和东八区的时区问题,精确定义时间范围。通过这些案例熟悉范围查询所使用的参数和注意事项。


ES版本信息

7.17.5


官方文档

Range Queryhttps://www.elastic.co/guide/en/elasticsearch/reference/7.17/query-dsl-range-query.html


相关术语

now

按照UTC时间格式的系统当前时间。UTC格式的时间比东八区(北京时间)慢8小时。例如:

东八区(北京时间)UTC时间(now)
2022-08-07 23:45:002022-08-07 15:45:00

from&to

可以用form和to进行范围搜索,from表示开始时间,to表示结束时间。特别注意:from是闭区间,等价于>=;to是开区间,等价于<

gt&gte&lt&lte

  • gt表示大于;
  • gte表示大于或等于;
  • lt表示小于;
  • lte表示小于或等于。

创建相关的索引和文档(数据用于实战案例)

创建索引

PUT /date_db
{
  "mappings": {
    "properties": {
      "createTime": {
        "type": "date",
        "format": "yyyy-MM-dd HH:mm:ss"
      },
      "createDate": {
        "type": "date",
        "format": "yyyy-MM-dd"
      },
      "birthday": {
        "type": "date",
        "format": "MM-dd"
      }
    }
  }
}

索引文档

PUT /date_db/_bulk
{"index":{"_id":"1"}}
{"birthday":"01-01","createTime":"2022-08-01 00:00:00","createDate":"2022-08-01"}
{"index":{"_id":"2"}}
{"birthday":"08-01","createTime":"2022-08-02 23:59:59","createDate":"2022-08-02"}
{"index":{"_id":"3"}}
{"birthday":"12-01","createTime":"2022-08-08 23:59:59","createDate":"2022-08-08"}
{"index":{"_id":"4"}}
{"birthday":"05-01","createTime":"2022-07-31 00:00:00","createDate":"2022-07-31"}

实战

基本语法

需求一:查询年龄在9-10之间(包含9和10)的文档。

GET /stu_db/_search
{
  "query": {
    "range": {
      "age": {
        "gte": 9,
        "lte": 10
      }
    }
  }
}

需求二:查询年龄在8-10之间(不包含8和10)的文档。

GET /stu_db/_search
{
  "query": {
    "range": {
      "age": {
        "gt": 8,
        "lt": 10
      }
    }
  }
}

检查时间范围的方法

问题&方法:query查询的结果集中并没有说明查询的时间范围,这对于不熟悉UTC时间格式的同学来说很不友好,但是在ES聚合时间查询的结果集中就有字段描述了时间范围

案例:查询两年前的数据,时间范围精确到天。假如今天是2022-09-06,则查询的时间范围:2020-09-06<=时间范围<2021-09-06。

GET /date_db/_search
{
  "size": 0,
  "aggs": {
    "range": {
      "date_range": {
        "field": "createTime",
        "ranges": [
          {
            "from": "now+8h-2y/d",
            "to": "now+8h-1y/d"
          }
        ]
      }
    }
  }
}

结果集

{
  "took" : 1,
  "timed_out" : false,
  "_shards" : {
    "total" : 1,
    "successful" : 1,
    "skipped" : 0,
    "failed" : 0
  },
  "hits" : {
    "total" : {
      "value" : 6,
      "relation" : "eq"
    },
    "max_score" : null,
    "hits" : [ ]
  },
  "aggregations" : {
    "range" : {
      "buckets" : [
        {
          "key" : "2020-09-06 00:00:00-2021-09-06 00:00:00",
          "from" : 1.5993504E12,
          "from_as_string" : "2020-09-06 00:00:00",
          "to" : 1.6308864E12,
          "to_as_string" : "2021-09-06 00:00:00",
          "doc_count" : 1
        }
      ]
    }
  }
}

查询今天的数据(精确单位:日)

分析

方法一:使用大于、小于、大于或等于,小于或等于进行范围搜索。

方法二:使用form和to进行范围搜索,from表示开始时间,to表示结束时间。

方法三(推荐):如果字段格式最精确的时间是日,如:yyyy-MM-dd,yyyyMMdd等,则推荐使用term(精准搜索)。

#查询今天的数据,精确单位:天。
GET /date_db/_search
{
  "query": {
    "range": {
      "createDate": {
        "gte": "now+8h/d",
        "lte": "now+8h/d"
      }
    }
  }
}

GET /date_db/_search
{
  "query": {
    "range": {
      "createDate": {
        "from": "now+8h/d",
        "to": "now+8h/d"
      }
    }
  }
}

GET /date_db/_search
{
  "query": {
    "term": {
      "createDate": {
        "value": "now+8h/d"
      }
    }
  }
}

GET /date_db/_search
{
  "query": {
    "term": {
      "createDate": "now+8h/d"
    }
  }
}

查询今天的数据(精确单位:小时)

分析

方法一:使用大于、小于、大于或等于,小于或等于进行范围搜索。

方法二:使用form和to进行范围搜索,from表示开始时间,to表示结束时间。

需求

查询今天00:00:00到当前时间(精确到小时)的数据。比如当前时间是"2022-08-08 01:06:45",则需要将2022-08-08 00至2022-08-08 01的数据查出来。

#查询今天的数据,精确单位:小时。
GET /date_db/_search
{
  "query": {
    "range": {
      "createTime": {
        "gte": "now+8h/d",
        "lte": "now+8h/h"
      }
    }
  }
}

GET /date_db/_search
{
  "query": {
    "range": {
      "createTime": {
        "from": "now+8h/d",
        "to": "now+8h/h"
      }
    }
  }
}

查询今天的数据(精确单位:分钟)

分析

方法一:使用大于、小于、大于或等于,小于或等于进行范围搜索。

方法二:使用form和to进行范围搜索,from表示开始时间,to表示结束时间。

需求

查询今天00:00:00到当前时间(精确到分钟)的数据。比如当前时间是"2022-08-08 01:06:45",则需要将2022-08-08 00:00至2022-08-08 01:06的数据查出来。

#查询今天的数据,精确单位:分钟。
GET /date_db/_search
{
  "query": {
    "range": {
      "createTime": {
        "gte": "now+8h/d",
        "lte": "now+8h/m"
      }
    }
  }
}

GET /date_db/_search
{
  "query": {
    "range": {
      "createTime": {
        "from": "now+8h/d",
        "to": "now+8h/m"
      }
    }
  }
}

查询今天的数据(精确单位:秒)

分析

方法一:使用大于、小于、大于或等于,小于或等于进行范围搜索。

方法二:使用form和to进行范围搜索,from表示开始时间,to表示结束时间。

需求

查询今天00:00:00到当前时间(精确到秒)的数据。比如(按照东八区计算):当前时间是"2022-08-08 01:06:45",则需要将2022-08-08 00:00:00至2022-08-08 01:06:45的数据查出来。

#查询今天的数据,精确单位:秒。
GET /date_db/_search
{
  "query": {
    "range": {
      "createTime": {
        "gte": "now+8h/d",
        "lte": "now+8h/s"
      }
    }
  }
}

GET /date_db/_search
{
  "query": {
    "range": {
      "createTime": {
        "from": "now+8h/d",
        "to": "now+8h/s"
      }
    }
  }
}

查询最近一周的数据

需求一

查询最近一周的数据,包含今天(精确到秒)。比如(按照东八区计算):现在是"2022-08-08 21:55:45",则查询的数据范围是:"2022-08-02 00:00:00"至"2022-08-08 21:55:45"。

GET /date_db/_search
{
  "query": {
    "range": {
      "createTime": {
        "from": "now+8h-6d/d",
        "to": "now+8h"
      }
    }
  }
}

GET /date_db/_search
{
  "query": {
    "range": {
      "createTime": {
        "gte": "now+8h-6d/d",
        "lte": "now+8h"
      }
    }
  }
}

需求二

查询最近一周的数据,包含今天(精确到天)。比如(按照东八区计算):现在是"2022-08-08 21:55:45",则查询的数据范围是:"2022-08-02 00:00:00"至"2022-08-08 23:59:59"。

GET /date_db/_search
{
  "query": {
    "range": {
      "createTime": {
        "from": "now+8h-6d/d",
        "to": "now+8h/d"
      }
    }
  }
}

GET /date_db/_search
{
  "query": {
    "range": {
      "createTime": {
        "gte": "now+8h-6d/d",
        "lte": "now+8h/d"
      }
    }
  }
}

需求三

查询最近一周的数据(前7天),不包含今天。比如(按照东八区计算):现在是"2022-08-08 21:55:45",则查询的数据范围是:"2022-08-01 00:00:00"至"2022-08-07 23:59:59"。

GET /date_db/_search
{
  "query": {
    "range": {
      "createTime": {
        "from": "now+8h-7d/d",
        "to": "now+8h-1d/d"
      }
    }
  }
}

GET /date_db/_search
{
  "query": {
    "range": {
      "createTime": {
        "from": "now+8h-1w/d",
        "to": "now+8h-1d/d"
      }
    }
  }
}

GET /date_db/_search
{
  "query": {
    "range": {
      "createTime": {
        "gte": "now+8h-7d/d",
        "lte": "now+8h-1d/d"
      }
    }
  }
}

GET /date_db/_search
{
  "query": {
    "range": {
      "createTime": {
        "gte": "now+8h-1w/d",
        "lte": "now+8h-1d/d"
      }
    }
  }
}

需求四

查询本周(自然周)的数据。这里推荐直接用精准搜索。

GET /date_db/_search
{
  "query": {
    "term": {
      "createTime": "now+8h/w"
    }
  }
}

查询最近一月的数据

需求一

查询本月(自然月)的数据。这里推荐直接用精准搜索。

GET /date_db/_search
{
  "query": {
    "term": {
      "createTime": "now+8h/M"
    }
  }
}

查询最近一年的数据

需求一

查询本年(自然年)的数据。这里推荐直接用精准搜索。

GET /date_db/_search
{
  "query": {
    "term": {
      "createTime": "now+8h/y"
    }
  }
}

有关Elasticsearch语法知多少之Range query的更多相关文章

  1. ruby - 树顶语法无限循环 - 2

    我脑子里浮现出一些关于一种新编程语言的想法,所以我想我会尝试实现它。一位friend建议我尝试使用Treetop(Rubygem)来创建一个解析器。Treetop的文档很少,我以前从未做过这种事情。我的解析器表现得好像有一个无限循环,但没有堆栈跟踪;事实证明很难追踪到。有人可以指出入门级解析/AST指南的方向吗?我真的需要一些列出规则、常见用法等的东西来使用像Treetop这样的工具。我的语法分析器在GitHub上,以防有人希望帮助我改进它。class{initialize=lambda(name){receiver.name=name}greet=lambda{IO.puts("He

  2. ruby-on-rails - 使用 Sublime Text 3 突出显示 HTML 背景语法中的 ERB? - 2

    所以我在关注Railscast,我注意到在html.erb文件中,ruby代码有一个微弱的背景高亮效果,以区别于其他代码HTML文档。我知道Ryan使用TextMate。我正在使用SublimeText3。我怎样才能达到同样的效果?谢谢! 最佳答案 为SublimeText安装ERB包。假设您安装了SublimeText包管理器*,只需点击cmd+shift+P即可获得命令菜单,然后键入installpackage并选择PackageControl:InstallPackage获取包管理器菜单。在该菜单中,键入ERB并在看到包时选择

  3. ruby - 覆盖相似的方法,更短的语法 - 2

    在Ruby类中,我重写了三个方法,并且在每个方法中,我基本上做同样的事情:classExampleClassdefconfirmation_required?is_allowed&&superenddefpostpone_email_change?is_allowed&&superenddefreconfirmation_required?is_allowed&&superendend有更简洁的语法吗?如何缩短代码? 最佳答案 如何使用别名?classExampleClassdefconfirmation_required?is_a

  4. ruby 语法糖 : dealing with nils - 2

    可能已经问过了,但我找不到它。这里有2个常见的情况(对我来说,在编程Rails时......)用ruby​​编写是令人沮丧的:"astring".match(/abc(.+)abc/)[1]在这种情况下,我得到一个错误,因为字符串不匹配,因此在nil上调用[]运算符。我想找到的是比以下内容更好的替代方法:temp="astring".match(/abc(.+)abc/);temp.nil??nil:temp[1]简而言之,如果不匹配,则简单地返回nil而不会出错第二种情况是这样的:var=something.very.long.and.tedious.to.writevar=some

  5. ruby - 可以通过多少种方法将方法添加到 ruby​​ 对象? - 2

    当谈到运行时自省(introspection)和动态代码生成时,我认为ruby​​没有任何竞争对手,可能除了一些lisp方言。前几天,我正在做一些代码练习来探索ruby​​的动态功能,我开始想知道如何向现有对象添加方法。以下是我能想到的3种方法:obj=Object.new#addamethoddirectlydefobj.new_method...end#addamethodindirectlywiththesingletonclassclass这只是冰山一角,因为我还没有探索instance_eval、module_eval和define_method的各种组合。是否有在线/离线资

  6. ruby - Ruby 语法糖有 "rules"吗? - 2

    我正在学习Ruby的基础知识(刚刚开始),我遇到了Hash.[]method.它被引入a=["foo",1,"bar",2]=>["foo",1,"bar",2]Hash[*a]=>{"foo"=>1,"bar"=>2}稍加思索,我发现Hash[*a]等同于Hash.[](*a)或Hash.[]*一个。我的问题是为什么会这样。是什么让您将*a放在方括号内,是否有某种规则可以在何时何地使用“it”?编辑:我的措辞似乎造成了一些困惑。我不是在问数组扩展。我明白了。我的问题基本上是:如果[]是方法名称,为什么可以将参数放在括号内?这看起来几乎——但不完全是——就像说如果你有一个方法Foo.d

  7. ruby - 如何让Ruby捕获线程中的语法错误 - 2

    我正在尝试使用ruby​​编写一个双线程客户端,一个线程从套接字读取数据并将其打印出来,另一个线程读取本地数据并将其发送到远程服务器。我发现的问题是Ruby似乎无法捕获线程内的错误,这是一个示例:#!/usr/bin/rubyThread.new{loop{$stdout.puts"hi"abc.putsefsleep1}}loop{sleep1}显然,如果我在线程外键入abc.putsef,代码将永远不会运行,因为Ruby将报告“undefinedvariableabc”。但是,如果它在一个线程内,则没有错误报告。我的问题是,如何让Ruby捕获这样的错误?或者至少,报告线程中的错误?

  8. ruby -::在 Ruby 语法中是什么意思? - 2

    这个问题在这里已经有了答案:WhatisRuby'sdouble-colon`::`?(12个答案)关闭8年前。什么是::?@song||=::TwelveDaysSong.new

  9. ruby - ruby 乘法语句中星号中断语法前的空格 - 2

    在添加一些空格以使代码更具可读性时(与上面的代码对齐),我遇到了这个:classCdefx42endendm=C.new现在这将给出“错误数量的参数”:m.x*m.x这将给出“语法错误,意外的tSTAR,期待$end”:2/m.x*m.x这里的解析器到底发生了什么?我使用Ruby1.9.2和2.1.5进行了测试。 最佳答案 *用于运算符(42*42)和参数解包(myfun*[42,42])。当你这样做时:m.x*m.x2/m.x*m.xRuby将此解释为参数解包,而不是*运算符(即乘法)。如果您不熟悉它,参数解包(有时也称为“spl

  10. ruby - 使用 Ruby,计算 n x m 数组的每一列中有多少个 true 的简单方法是什么? - 2

    给定一个nxmbool数组:[[true,true,false],[false,true,true],[false,true,true]]有什么简单的方法可以返回“该列中有多少个true?”结果应该是[1,3,2] 最佳答案 使用转置得到一个数组,其中每个子数组代表一列,然后将每一列映射到其中的true数:arr.transpose.map{|subarr|subarr.count(true)}这是一个带有inject的版本,应该在1.8.6上运行,没有任何依赖:arr.transpose.map{|subarr|subarr.in

随机推荐