Kibana查詢語言(KQL)

  • 2020 年 12 月 26 日
  • 筆記

一.前言

  現在大多數的公司都會使用ELK組合來對日誌數據的收集、存儲和提供查詢服務,這裡就不介紹什麼是ELK了,只介紹一些EKL中的查詢,也就是K(kibana)。

  查詢數據庫,如果是MySQL,那麼就需要使用MySQL的語法;同樣的,在Kibana上查詢數據,也需要使用Kibana的語法,而Kibana的查詢語法叫做Kibana Query Language,簡稱KQL。

  本文的內容主要來自ES的官網,簡單翻譯了一下,//www.elastic.co/guide/en/kibana/7.7/kuery-query.html

  原文鏈接://www.cnblogs.com/-beyond/p/14159002.html

 

二.KQL簡單介紹

  KQL(Kibana Query Language),也就是在Kibana上面進行查詢時使用的語法。

  Kibana中也可以使用Lucene的查詢語法,但是這裡就不介紹了,可以參考//www.elastic.co/guide/en/kibana/7.7/lucene-query.html

 

三.使用索引匹配查詢

  在Kibana中進行查詢的時候,建議使用指定索引查詢,這樣的效率更高,而不建議使用全局查找的方式。

  比如查找response為200的日誌,那麼就寫為response:200,這樣去查找中response值為200的文檔對象;

  如果沒有指定response為200,那麼只是單純的查找200,那麼可能會返回金額為200的文檔對象(假設有金額字段),查詢的效率不高,同時也會返回一些不需要的數據; 

 

四.Kibana查詢語法

實例1

response:200

  上面這個表達式,會查詢出response字段中包含200的文檔對象,注意是包含,包含的是200這一個詞,比如下面幾種情況都會被查詢出來

200
hello world 200
hello 200 world

  需要注意的是1200或者2001,是不能被查出來的。

 

實例2

message:"hello world yes"

  上面這個表達式,是針對message字段進行搜索,在搜索的時候不會區分大小寫,也就是說,Hello world YES也是會被搜索出來的;

  需要注意,上面的”hello world yes”使用了引號,這樣的話,這3個單詞會被作為一個詞進行查詢,不會再進行分詞,也就是說匹配的時候只會匹配hello world yes這樣的順序匹配,而不會匹配出helllo yes world;

 

實例3

message:hello world

  上面這個表達式,針對message字段進行搜索,搜索message中包含hello,或者包含world,或者兩者都包含的情況;

  需要注意的是,不區分大小寫,也不會保證順序,也就是說,下面幾種情況都會被匹配

hello
world
Hello
World
hello world
Hello world
hello yes World
yes world
world yes

  

實例4

name:jane or addr:beijing

  上面這個查詢條件,會查詢name字段包含jane,或者addr字段包含beijing的記錄,或者兩者都匹配;

  需要注意的是,or表示「或」,不區分大小寫;

 

實例5

name:jane and addr:beijing

  上面這個條件,會查詢name字段包含jane,且addr字段包含beijing的記錄。

 

實例6

name:jane and addr:beijing or job:teacher

  上面這個查詢條件中,出現了and和or,需要記住的是,KQL中,and的優先級高於or;

  所以上面的查詢條件,會查詢name包含jane,且addr包含beijing的記錄,或者job包含teacher的記錄,可以使用括號來讓上面的查詢條件更好理解:

(name:jane and addr:beijing) or job:teacher

 

實例7

name:jane and (addr:beijing or job:teacher)

  上面這個表達式,主要是想表明,可以使用括號來控制匹配的優先級。

 

實例8

response:(200 or 404)

  上面這個表達式,會查詢response包含200,或者response包含404,或者包含200和404的記錄(不保證順序、不區分大小寫);

  同時可以使用and來表示「且」的關係。

 

實例9

not response:200

  上面這個查詢條件,會查詢出response字段中不包含200的記錄。

 

實例10

response:200 and not yes

  上面這個查詢條件,會查詢response包含200,並且整條記錄不包含yes的數據記錄;

 

實例11

response:(200 and not yes)

  上面這個查詢條件,會查詢response包含200,且response不包含yes的記錄。

 

實例12

response:*

  上面這個查詢條件,會返回所有包含response字段的文檔對象。

 

實例13

machine*:hello

  上面這個查詢條件,會查詢machine1字段,machine2字段…machinexyzabc字段包含hello的數據記錄,這裡只是想表達,對於搜索的字段列,也是可以使用通配符的。

 

五.總結

  KQL還是比較簡單地,主要記住KQL匹配時是不區分大小寫的,可以使用括號改變匹配優先級;

  另外一個要點就是,匹配是「包含」,某個字段「包含」某個詞,而不是某個字段的值為某個詞。

 

原文鏈接://www.cnblogs.com/-beyond/p/14159002.html

參考文獻:

  //www.elastic.co/guide/en/kibana/7.7/search.html

  //www.elastic.co/guide/en/kibana/7.7/kuery-query.html