快捷導(dǎo)航

Elasticsearch?計(jì)數(shù)分詞中的token使用實(shí)例

更新時(shí)間：2023年01月31日 14:28:16 作者：Elasticsearch

這篇文章主要為大家介紹了Elasticsearch?計(jì)數(shù)分詞中的token使用示例詳解，有需要的朋友可以借鑒參考下，希望能夠有所幫助，祝大家多多進(jìn)步，早日升職加薪

正文

在我們針對(duì) text 類型的字段進(jìn)行分詞時(shí)，分詞器會(huì)把該字段分解為一個(gè)個(gè)的 token。如果你對(duì)分詞器還不是很理解的話，請(qǐng)參考我之前的文章 “Elasticsearch: analyzer”。在分詞時(shí)，有一個(gè)叫做 token_count 的類型。該類型是 token 的計(jì)數(shù)器，也就是說(shuō)，我們可以使用它來(lái)了解在索引字段時(shí)在字符串中生成的 token 數(shù)量。

我們下面用一個(gè)比較簡(jiǎn)單的例子來(lái)進(jìn)行展示。在我們的示例中，我們將索引一些書(shū)名，并且我們將過(guò)濾標(biāo)題中只有 2 個(gè) token 的書(shū)。

`
 PUT book_token_count_test
 {
   "mappings": {
     "properties": {
       "book_name": {
         "type": "text",
         "fields": {
           "size": {
             "type": "token_count",
              "analyzer": "standard"
            }
          }
        }
      }
    }
  }
`![](https://csdnimg.cn/release/blogv2/dist/pc/img/newCodeMoreWhite.png)

使用命令寫(xiě)入文檔

我們使用如下的命令來(lái)寫(xiě)入一下文檔：

  POST book_token_count_test/_bulk
  {"index":{}}
  { "book_name": "Ulysses" }
  {"index":{}}
  { "book_name": "Don Quixote" }
  {"index":{}}
  { "book_name": "One Hundred Years of Solitude" }

搜索 token 文檔

我們使用如下的命令來(lái)搜索 token 數(shù)為 2 的文檔：

 GET book_token_count_test/_search
 {
   "query": {
     "term": {
       "book_name.size": {
         "value": "2"
       }
     }
   }
  }

上面搜索的結(jié)果為：

`
 {
   "took": 273,
   "timed_out": false,
   "_shards": {
     "total": 1,
     "successful": 1,
     "skipped": 0,
     "failed": 0
   },
    "hits": {
      "total": {
        "value": 1,
        "relation": "eq"
      },
      "max_score": 1,
      "hits": [
        {
          "_index": "book_token_count_test",
          "_id": "cxczBoYB6OPboMnB7TQu",
          "_score": 1,
          "_source": {
            "book_name": "Don Quixote"
          }
        }
      ]
    }
  }
`![](https://csdnimg.cn/release/blogv2/dist/pc/img/newCodeMoreWhite.png)

我們可以使用 range 查詢來(lái)檢索 book_name 中包含 3 個(gè)以上 token 的文檔，我們只會(huì)得到標(biāo)題為 “One Hundred Years of Solitude” 的文檔。

  GET book_token_count_test/_search
  {
    "query": {
      "range": {
        "book_name.size": {
          "gte": 3
        }
      }
    }
  }

上面搜索的結(jié)果為：

`
  {
    "took": 1,
    "timed_out": false,
    "_shards": {
      "total": 1,
      "successful": 1,
      "skipped": 0,
      "failed": 0
    },
    "hits": {
      "total": {
        "value": 1,
        "relation": "eq"
      },
      "max_score": 1,
      "hits": [
        {
          "_index": "book_token_count_test",
          "_id": "dBczBoYB6OPboMnB7TQu",
          "_score": 1,
          "_source": {
            "book_name": "One Hundred Years of Solitude"
          }
        }
      ]
    }
  }
`![](https://csdnimg.cn/release/blogv2/dist/pc/img/newCodeMoreWhite.png)

以上就是Elasticsearch 計(jì)數(shù)分詞中的token使用實(shí)例的詳細(xì)內(nèi)容，更多關(guān)于Elasticsearch計(jì)數(shù)分詞token的資料請(qǐng)關(guān)注腳本之家其它相關(guān)文章！

您可能感興趣的文章: