solr默认评分算法详解 您所在的位置:网站首页 solr算法 solr默认评分算法详解

solr默认评分算法详解

2024-07-08 08:51| 来源: 网络整理| 查看: 265

撸了今年阿里、头条和美团的面试,我有一个重要发现.......>>>

评分算法公式:计算查询词和文档的关联度(评分),评分越高相关度越高

变量含义解释:

q : 查询词

d:一个文档,这里指文章标题+作者+摘要

t:查询词,分词后的每个词

函数含义解析:

tf 函数,词频

idf函数 ,反转文档频率,文档总数/含有这个词的文档数,降低在所有文档中的高频词对搜索词含义的影响,举例:我、的、这类词出现的在所有文档都出现所以要降低它们在搜索查询词中的权重

getBoost函数, 获取查询对词指定的权重(暂时无特殊处理)

norm函数,由先三个函数相乘获得

Document boost - 文档加权,在索引之前使用 doc.setBoost()

Field boost - 字段加权,也在索引之前调用 field.setBoost()

lengthNorm(field) - 由字段内的 Token 的个数来计算此值,字段越短,评分越高(注意:lucene 相似度默认实现:计算文档长度时没有调用lengthNorm方法文档长度,而是从TFIDFSimilarity )

代码语言:javascript复制public final SimScorer simScorer(SimWeight stats, LeafReaderContext context) throws IOException { IDFStats idfstats = (IDFStats) stats; return new TFIDFSimScorer(idfstats, context.reader().getNormValues(idfstats.field)); }

coord(q,d),评分因子,是基于文档中出现查询词的个数。越多的查询词在一个文档中,说明些文档的匹配程序越高。默认是出现查询项的百分比,比如查询词被分词3个词,命中n个(n



【本文地址】

公司简介

联系我们

今日新闻

    推荐新闻

    专题文章
      CopyRight 2018-2019 实验室设备网 版权所有