學習Xapian(3) – 同義詞的查詢拓展

Xapian支持同義詞的查詢拓展。
按照同義詞進行拓展算是查詢拓展最基本的一種方式。
比如“汽車展覽”“車展”是同義詞,我們搜索汽車展覽的時候,也會把“車展”的結果返回。
很多人認爲這個就是拼寫校正,但實際它比拼寫校正稍微高級點,特別是放在Xapian的語境下,畢竟拼寫校正是基於編輯距離而不是語義的。

1、在DB寫入同義詞組
創建同義詞組的API很簡明。
WritableDatabase::add_synonym(term, synonym)
這一對同義詞是有方向的,term的同義詞是synonym,反之不成立。
即我們搜索“汽車展覽”時能拓展出“車展”,反之不成立,如果你需要,那麼反着再插入一次吧!

2、在搜索時使用同義詞組
和拼寫校正一樣,肯定的對QueryParser設置db,QueryParser::set_database()
然後在QueryParser::parse_query時,第二個參數傳入FLAG_SYNONYM 或者 FLAG_AUTO_SYNONYMS
FLAG_SYNONYM 是在查詢語句中出現~WORD 的形式,則把WORD自動同義詞拓展
FLAG_AUTO_SYNONYMS 則是把全部的詞都給查詢拓展,不用顯示的寫~。

例子:寫入同義詞組

#include <xapian.h> 
#include <iostream> 
using namespace std; 
#define CONTENT "70比 69, 這是 男籃 亞錦賽 歷史上 的 最小 分 差 比賽 , 笑 到 最後 的是 東道主 中國隊 。 可以說 , 這是 一次 最 驚險 的 勝利 ; 也可 以 說 , 這是 中國男籃 最 幸運 的 結局 。終 >  場 哨 響 , 中國隊 主教練 鄧 華德 和 籃管中心 副主任 胡 加時 緊緊擁抱 在一 起 , 兩人 都 激動 得 熱淚盈眶 —— 中國隊 贏了 , 贏得 很 慶幸 。" 
#define INDEX_PATH "./index_data" 
#define WORD1 "男藍" 
#define WORD2 "男籃" 
int main() 

    try
    { 
        //Text to be indexed 
        string content(CONTENT); 
  
        //Open an Database for write 
        Xapian::WritableDatabase db(string(INDEX_PATH), Xapian::DB_CREATE_OR_OPEN); 
  
        //Add Synonym 
        db.add_synonym(string(WORD1), string(WORD2)); 
  
        //Prepare TermGenerator, just split word by space, not chinese analysis 
        Xapian::TermGenerator indexer; 
  
        //Make Document 
        Xapian::Document doc; 
        doc.set_data(content); 
        indexer.set_document(doc); 
        indexer.index_text(content); 
  
        //Add Document to db 
        db.add_document(doc); 
  
        //Flush to disk 
        db.commit(); 
    } 
    catch(const Xapian::Error &e) 
    { 
        cout << e.get_description() << endl; 
    } 
    return 0; 
}

例子:同義詞組查詢拓展


#include <xapian.h> 
#include <iostream> 
using namespace std; 
#define QUERY "~男藍 AND 中國隊" 
#define INDEX_PATH "./index_data" 
int main() 

    try
    { 
        //Query 
        string query_str(QUERY); 
  
        //Open an Database for read 
        Xapian::Database db(string(INDEX_PATH)); 
  
        //Open Search Handle 
        Xapian::Enquire enquire(db); 
  
        //Parser Query, set db && FLAG_AUTO_SYNONYMS 
        Xapian::QueryParser qp; 
        qp.set_database(db); 
        Xapian::Query query = qp.parse_query(query_str, Xapian::QueryParser::FLAG_SYNONYM); 
        cout << "Query is " << query.get_description() << endl; 
  
        //Find top 10 results 
        enquire.set_query(query); 
        Xapian::MSet result = enquire.get_mset(0, 10); 
        cout << result.get_matches_estimated() << " results found" << endl; 
  
        //Print results 
        for(Xapian::MSetIterator itr = result.begin(); itr!=result.end(); itr++) 
        { 
            Xapian::Document doc = itr.get_document(); 
            cout << itr.get_rank() << ": " << ", data " << doc.get_data() << endl; 
        } 
  
        //Close DB 
        db.close(); 
    } 
    catch(const Xapian::Error &e) 
    { 
        cout << e.get_description() << endl; 
    } 
    return 0; 
}

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章