elasticsearch 通过HTTP RESTful API 操作数据

  1、索引样例数据

    下载样例数据集链接 下载后解压到ES的bin目录,然后加载到elasticsearch集群

    

    curl -XPOST 127.0.0.1:9200/bank/account/_bulk?pretty --data-binary @accounts.json

    如果accounts.json文件和bin目录并列:curl -XPOST 127.0.0.1:9200/bank/account/_bulk?pretty --data-binary @..accounts.json

    

    查看索引:curl localhost:9200/_cat/indices?v

    

    上面结果,说明我们成功bulk 1000个文档到bank索引中了

    删除索引bank:curl -XDELETE http://127.0.0.1:9200/bank

   2、搜索数据API

    有两种方式:一种方式是通过 REST 请求 URI ,发送搜索参数;另一种是通过REST 请求体,发送搜索参数。而请求体允许你包含更容易表达和可阅读的JSON格式。

     2.1、通过 REST 请求 URI

      curl localhost:9200/bank/_search?pretty

    

    pretty,参数告诉elasticsearch,返回形式打印JSON结果

    2.2、通过REST 请求体

      

      curl -XPOST localhost:9200/bank/_search?pretty -d "{"query": {"match_all": {} }}"

      query:告诉我们定义查询 
      match_all:运行简单类型查询指定索引中的所有文档

      

      除了指定查询参数,还可以指定其他参数来影响最终的结果。

      2.3、match_all & 只返回前两个文档:

      

      curl -XPOST localhost:9200/bank/_search?pretty -d "{"query": {"match_all": {} }, "size" : 2}"

      

    如果不指定size,默认是返回10条文档信息

    2.4、match_all & 返回第11到第20的10个文档信息

    

    curl -XPOST localhost:9200/bank/_search?pretty -d "{"query": {"match_all": {} }, "from" : 10, "size" : 10}"

    from:指定文档索引从哪里开始,默认从0开始 

    size:从from开始,返回多个文档 

    这feature在实现分页查询很有用

      

    

    2.5、match_all and 根据account 的balance字段 降序排序 & 返回10个文档(默认10个)

    

    curl -XPOST localhost:9200/bank/_search?pretty -d "{"query": {"match_all": {} }, "sort" : {"balance" : {"order" : "desc" }}}"

    2.6、比如只返回account_number 和balance两个字段

    默认的,我们搜索返回完整的JSON文档。而source(_source字段搜索点击量)。如果我们不想返回完整的JSON文档,我们可以使用source返回指定字段。

    

    比如只返回account_number 和balance两个字段

    

    curl -XPOST localhost:9200/bank/_search?pretty -d "{"query": {"match_all": {} }, "_source": ["account_number", "balance"]}"

     

    match 查询,可作为基本字段搜索查询  

   

    2.7、返回 account_number=20:

    

    curl -XPOST localhost:9200/bank/_search?pretty -d "{"query": {"match": {"account_number": 20 } }}"

     

    

    2.8、返回 address=mill:

    

    curl -XPOST localhost:9200/bank/_search?pretty -d "{"query": {"match": {"address": "mill" } }}"

    

    

    2.9、返回 address=mill or address=lane:

    

    curl -XPOST localhost:9200/bank/_search?pretty -d "{"query": {"match": {"address": "mill lane" } }}"

    

    2.10、返回 短语匹配 address=mill lane:

    

     curl -XPOST localhost:9200/bank/_search?pretty -d "{"query": {"match_phrase": {"address": "mill lane" } }}"

     

     2.11、布尔值(bool)查询

      返回 匹配address=mill & address=lane:

      

      must:要求所有条件都要满足(类似于&&)

      curl -XPOST localhost:9200/bank/_search?pretty -d "{"query": {"bool": {"must": [{"match": {"address": "mill" }},{"match": {"address": "lane" }}]}}}"

    2.12、返回 匹配address=mill or address=lane

      

      curl -XPOST localhost:9200/bank/_search?pretty -d "{"query": {"bool": {"should": [{"match": {"address": "mill" }},{"match": {"address": "lane" }}]}}}"

      should:任何一个满足就可以(类似于||)

     2.13、返回 不匹配address=mill & address=lane

      

      curl -XPOST localhost:9200/bank/_search?pretty -d "{"query": {"bool": {"must_not": [{"match": {"address": "mill" }},{"match": {"address": "lane" }}]}}}"

      must_not:所有条件都不能满足(类似于! (&&))

      

    2.14、返回 age=40 & state!=ID

      

      curl -XPOST localhost:9200/bank/_search?pretty -d "{"query": {"bool": {"must": [{"match": {"address": "mill" }}],"must_not": [{"match": {"state": "ID" }}]}}}"

 

  3、执行过滤器

    文档中score(_score字段是搜索结果)。score是一个数字型的,是一种相对方法匹配查询文档结果。分数越高,搜索关键字与该文档相关性越高;越低,搜索关键字与该文档相关性越低。

    在elasticsearch中所有的搜索都会触发相关性分数计算。如果我们不使用相关性分数计算,那要使用另一种查询能力,构建过滤器

    过滤器是类似于查询的概念,除了得以优化,更快的执行速度的两个主要原因: 

    1、过滤器不计算得分,所以他们比执行查询的速度 

    2、过滤器可缓存在内存中,允许重复搜索

    为了便于理解过滤器,先介绍过滤器搜索(like match_all, match, bool, etc.),可以与其他的普通查询搜索组合一个过滤器。 

    range filter,允许我们通过一个范围值来过滤文档,一般用于数字或日期过滤

    使用过滤器搜索返回 balances[ 20000,30000]。换句话说,balance>=20000 && balance<=30000

    

POST /bank/_search?pretty
{
  "query": {
    "bool": {
        "must":     { "match": { "age": 39 }},
        "must_not": { "match": { "employer":"Digitalus" }},
        "filter": 
        {
          "range": 
            { "balance": 
              {
                "gte": 20000,
                "lte": 30000             
              }          
            } 
        }
    }
  }
}

  3、执行聚合

    聚合提供从你的数据中分组和提取统计能力, 类似于关系型数据中的SQL GROUP BY和SQL 聚合函数。

    在Elasticsearch中,你有能力执行搜索返回命中结果,同时拆分命中结果,然后统一返回结果。当你使用简单的API运行搜索和多个聚合,然后返回所有结果避免网络带宽过大的情况是高效的。

    3.1、根据state分组,降序统计top 10 state

原文地址:https://www.cnblogs.com/shaosks/p/7810046.html