应用于问答系统的Lucene相似度检索算法改进

Lucene在文本检索和搜索领域有着广泛的应用,相似度评分算法是其搜索引擎的核心部分之一.而在问答系统中,也要用到检索功能,相似度评分算法也是其核心部分之一.那么能否对Lucene的相似度评分算法进行改进,使其在问答系统的领域也能得到很好的应用.针对上述提出的问题,结合问答系统中问句简短、包含信息量少的特点,引入外部词典对查找的关键词进行扩展,分析检索词项的语义相似度以及将词项位置关系的特征应用到Lucene中.在Lucene的基础上,对其语义相似度算法进行改进,提出了一种新的语义相似度评分算法.该算法考虑了词项位置关系和语义理解,能够更好地应用于问答系统.实验结果表面,提出的相似度算法能有效地提高自动问答系统的回答准确率