在這出現了一個軟件就是Solr的軟件,下面就和大家一起來看看這個軟件怎麼用
上圖爲安裝solr環境的軟件的左面截圖,首先來看看這幅圖的講解:
1、Dashboard:就是上面全圖就是這個按鈕的功能;
2、Logging:查看日誌;
3、CoreAdmin:添加core用戶,這個可重要也可不重要,默認是collection1,這個就是添加一個和collection1具有一樣功能的用戶,用來檢索和查詢。點擊之
後會出現下面的截圖:
補充:
name:給core隨便起個名字;
instanceDir:core的安裝目錄,這裏就是之前在tomcat/solrhome/目錄下創建的core1文件夾;
dataDir:指定用於存放lucene索引和log日誌文件的目錄路徑,該路徑是相對於core根目錄(在單core模式下,就直接是相對於solr_home了),默認值是當前core目錄下的data;
config:用於指定solrconfig.xml配置文件的文件名,啓動時會去core1/config目錄下去查找;
schema:即用來配置你的schema.xml配置文件的文件名的,schema.xml配置文件應該存放在當前core目錄下的conf目錄下。但是下載的solr裏沒有這個文件,所以我也不管了;
屬性都填上,然後點擊AddCore,就創建完成了。
再看最下面的下拉框:點擊之後會出現collection1,點擊collection1出現如下截圖:
因爲我在這之前添加了一個索引文檔,所以我的顯示的Num Docs和Max Doc 是有值的,沒有安裝就是爲0;
就來介紹一下選中core角色後生成的一些按鈕功能。
1、Overview:是瀏覽你的索引文檔。其中包括最後開啓時間、文檔內存數量、文檔最大數量等等一些信息;
2、Analysis:解析瀏覽。如下圖:
看左上方的Field Value(Index):這個是定義你要索引的屬性值;
右上方的Field Value(Query):這個是根據輸入的值,來進行查找;
底下的Analyse Fieldname / FieldType :就是你要往哪個屬性裏添加索引的值。
3、dataImport:就是數據的引進。
4、FIles、Ping、Pligins/Stats這些不怎麼常用,這裏就不多詳細介紹了。
5、Query:是根據索引屬性查詢,效果如下:
看到這,相信有的人就要問了,拿這些是幹嘛的呢?下面就介紹一下他們是幹嘛的:
q:查詢字符串,必須寫,格式爲:“索引屬性:屬性值”,必須遵守這種格式,否則查不出來。
fq:filterquery。使用Filter Query可以充分利用Filter QueryCache,提高檢索性能。作用:在q查詢符合結果中同時是fq查詢符合的,例如:
q=mm&fq=date_time:[20081001 TO20091031],找關鍵字mm,並且date_time是20081001到20091031之間的。
fl:fieldlist。指定返回結果字段。以空格“ ”或逗號“,”分隔。
start:用於分頁定義結果起始記錄數,默認爲0。
rows:用於分頁定義結果每頁返回記錄數,默認爲10。
sort:排序,格式:sort=<fieldname>+<desc|asc>[,<field name>+<desc|asc>]… 。示例:(inStockdesc, price asc)表示先 “inStock” 降序, 再 “price” 升序,默認是
相關性降序。
df:默認的查詢字段,一般默認指定。
q.op:覆蓋schema.xml的defaultOperator(有空格時用"AND"還是用"OR"操作邏輯),一般默認指定。必須大寫
wt:writertype。指定查詢輸出結構格式,默認爲“xml”。在solrconfig.xml中定義了查詢輸出格式:xml、json、python、ruby、php、phps、custom。
qt:querytype,指定查詢使用的Query Handler,默認爲“standard”。
explainOther:設置當debugQuery=true時,顯示其他的查詢說明。
defType:設置查詢解析器名稱。
timeAllowed:設置查詢超時時間。
omitHeader:設置是否忽略查詢結果返回頭信息,默認爲“false”。
indent:返回的結果是否縮進,默認關閉,用indent=true|on 開啓,一般調試json,php,phps,ruby輸出纔有必要用這個參數。
version:查詢語法的版本,建議不使用它,由服務器指定默認值。
debugQuery:設置返回結果是否顯示Debug信息。
以上這些就是solr的一些參數,下面就來介紹一下,查詢的語法有哪些?
語法:
1.匹配所有文檔:*:*
2.強制、阻止和可選查詢:
1) Mandatory:查詢結果中必須包括的(for example, onlyentry name containing the word make)
Solr/LuceneStatement:+make, +make +up ,+make +up +kiss
2) prohibited:(for example, all documentsexcept those with word believe)
Solr/LuceneStatement:+make +up -kiss
3) optional:
Solr/LuceneStatement:+make +up kiss
3.布爾操作:AND、OR和NOT布爾操作(必須大寫)與Mandatory、optional和prohibited相似。
1) make AND up = +make +up:AND左右兩邊的操作都是mandatory
2) make || up = make OR up=make up:OR左右兩邊的操作都是optional
3) +make +up NOT kiss = +make +up –kiss
4) make AND up OR french ANDKiss不可以達到期望的結果,因爲AND兩邊的操作都是mandatory的。
4.子表達式查詢(子查詢):可以使用“()”構造子查詢。
示例:(makeAND up) OR (french AND Kiss)
5.子表達式查詢中阻止查詢的限制:
示例:make(-up):只能取得make的查詢結果;要使用make (-up *:*)查詢make或者不包括up的結果。
6.多字段fields查詢:通過字段名加上分號的方式(fieldName:query)來進行查詢
示例:entryNm:makeAND entryId:3cdc86e8e0fb4da8ab17caed42f6760c
7.通配符查詢(wildCardQuery):
1) 通配符?和*:“*”表示匹配任意字符;“?”表示匹配出現的位置。
示例:ma?*(ma後面的一個位置匹配),ma??*(ma後面兩個位置都匹配)
2) 查詢字符必須要小寫:+Ma +be**可以搜索到結果;+Ma+Be**沒有搜索結果.
3) 查詢速度較慢,尤其是通配符在首位:主要原因一是需要迭代查詢字段中的每個term,判斷是否匹配;二是匹配上的term被加到內部的查詢,當terms數量達到1024的時候,查詢會失敗。
4) Solr中默認通配符不能出現在首位(可以修改QueryParser,設置
setAllowLeadingWildcard爲true)
5) set setAllowLeadingWildcard to true.
8.模糊查詢、相似查詢:不是精確的查詢,通過對查詢的字段進行重新插入、刪除和轉換來取得得分較高的查詢解決(由LevensteinDistance Algorithm算法支持)。
1) 一般模糊查詢:示例:make-believ~
2) 門檻模糊查詢:對模糊查詢可以設置查詢門檻,門檻是0~1之間的數值,門檻越高表面相似度越高。示例:make-believ~0.5、make-believ~0.8、make-believ~0.9
9.範圍查詢(RangeQuery):Lucene支持對數字、日期甚至文本的範圍查詢。結束的範圍可以使用“*”通配符。
示例:
1) 日期範圍(ISO-8601 時間GMT):sa_type:2 ANDa_begin_date:[1990-01-01T00:00:00.000Z TO 1999-12-31T24:59:99.999Z]
2) 數字:salary:[2000 TO *]
3) 文本:entryNm:[a TO a]
10.日期匹配:YEAR,MONTH, DAY, DATE (synonymous with DAY) HOUR, MINUTE, SECOND, MILLISECOND, andMILLI (synonymous with MILLISECOND)可以被標誌成日期。
示例:
1) r_event_date:[* TO NOW-2YEAR]:2年前的現在這個時間
2) r_event_date:[* TO NOW/DAY-2YEAR]:2年前前一天的這個時間
在solr裏,也有函數,接下來就看看solr是怎樣通過函數查詢的:
函數查詢 可以利用 numeric字段的值 或者與字段相關的的某個特定的值的函數,來對文檔進行評分。
1. 使用函數查詢的方法
這裏主要有三種方法可以使用函數查詢,這三種s方法都是通過solrhttp接口的。
1) 使用FunctionQParserPlugin。ie:q={!func}log(foo)
2) 使用“_val_”內嵌方法
內嵌在正常的solr查詢表達式中。即,將函數查詢寫在q這個參數中,這時候,我們使用“_val_”將函數與其他的查詢加以區別。
ie:entryNm:make&& _val_:ord(entryNm)
3) 使用dismax中的bf參數
使用明確爲函數查詢的參數,比如說dismax中的bf(boostfunction)這個參數。 注意:bf這個參數是可以接受多個函數查詢的,它們之間用空格隔開,它們還可以帶上權重。所以,當我們使用bf這個參數的時候,我們必須保證單個函數中是沒有空格出現的,不然程序有可能會以爲是兩個函數。
示例:
q=dismax&bf="ord(popularity)^0.5recip(rord(price),1,1000,1000)^0.3
2. 函數的格式(Function Query Syntax)
目前,functionquery 並不支持 a+b 這樣的形式,我們得把它寫成一個方法形式,這就是 sum(a,b).
3. 使用函數查詢注意事項
1) 用於函數查詢的field必須是被索引的;
2) 字段不可以是多值的(multi-value)
4. 可以利用的函數 (available function)
1) constant:支持有小數點的常量; 例如:1.5;SolrQuerySyntax:_val_:1.5
2) fieldvalue:這個函數將會返回numericfield的值,這個字段必須是indexd的,非multiValued的。格式很簡單,就是該字段的名字。如果這個字段中沒有這樣的值,那麼將會返回0。
3) ord:對於一個字段,它所有的值都將會按照字典順序排列,這個函數返回你要查詢的那個特定的值在這個順序中的排名。這個字段,必須是非multiValued的,當沒有值存在的時候,將返回0。例如:某個特定的字段只能去三個值,“apple”、“banana”、“pear”,那麼ord(“apple”)=1,ord(“banana”)=2,ord(“pear”)=3.需要注意的是,ord()這個函數,依賴於值在索引中的位置,所以當有文檔被刪除、或者添加的時候,ord()的值就會發生變化。當你使用MultiSearcher的時候,這個值也就是不定的了。
4) rord:這個函數將會返回與ord相對應的倒排序的排名。
格式:rord(myIndexedField)。
5) sum:這個函數的意思就顯而易見啦,它就是表示“和”啦。
格式:sum(x,1)、sum(x,y)、 sum(sqrt(x),log(y),z,0.5)
6) product:product(x,y,...)將會返回多個函數的乘積。格式:product(x,2)、product(x,y)
7) div:div(x,y)表示x除以y的值,格式:div(1,x)、div(sum(x,100),max(y,1))
8) pow:pow表示冪值。pow(x,y) =x^y。例如:pow(x,0.5)表示開方pow(x,log(y))
9) abs:abs(x)將返回表達式的絕對值。格式:abs(-5)、 abs(x)
10) log:log(x)將會返回基數爲10,x的對數。格式: log(x)、log(sum(x,100))
11) Sqrt:sqrt(x) 返回一個數的平方根。格式:sqrt(2)、sqrt(sum(x,100))
12) Map:如果x>=min,且x<=max,那麼map(x,min,max,target)=target.如果x不在[min,max]這個區間內,那麼map(x,min,max,target)=x.
格式:map(x,0,0,1)
13) Scale:scale(x,minTarget,maxTarget)這個函數將會把x的值限制在[minTarget,maxTarget]範圍內。
14) query:query(subquery,default)將會返回給定subquery的分數,如果subquery與文檔不匹配,那麼將會返回默認值。任何的查詢類型都是受支持的。可以通過引用的方式,也可以直接指定查詢串。
例子:q=product(popularity,query({!dismax v='solr rocks'}) 將會返回popularity和通過dismax 查詢得到的分數的乘積。
q=product(popularity,query($qq)&qq={!dismax}solr rocks 跟上一個例子的效果是一樣的。不過這裏使用的是引用的方式
q=product(popularity,query($qq,0.1)&qq={!dismax}solr rocks 在前一個例子的基礎上又加了一個默認值。
15) linear: inear(x,m,c)表示 m*x+c,其中m和c都是常量,x是一個變量也可以是一個函數。例如: linear(x,2,4)=2*x+4.
16) Recip:recip(x,m,a,b)=a/(m*x+b)其中,m、a、b是常量,x是變量或者一個函數。當a=b,並且x>=0的時候,這個函數的最大值是1,值的大小隨着x的增大而減小。例如:recip(rord(creationDate),1,1000,1000)
17) Max: max(x,c)將會返回一個函數和一個常量之間的最大值。
例如:max(myfield,0)