从挑水果看精度与查全率如何影响搜索性能
创始人
2025-01-28 12:41:48
0

【51CTO.com快译】是与搜精度与查全率索技术相关的两项根本性机制。立足于一次特定查询——利用搜索引擎查找特定文档集(即结果集),我们可以这样对二者做出定义:

  • 精度为全部返回相关结果当中文档所占的百分比。
  • 查全率为结果集中相关文档的百分比。

诚然,这些定义刚开始可能不太容易理解。二者看起来甚至有点是一回事——别急,下面我们就立足于实例对其加以讲解。通过这样的过程,大家也能够理解二者为什么在设计搜索应用时会扮演如此重要的角色。

另外,我们还将探讨精度与查全率之间经常出现的冲突状况。一般来讲,查全率越高、精度越差,而精度越高、查全率也就越差。这意味着搜索结果相关性中存在着一种最佳平衡点。幸运的是,我们有办法尽可能趋近该平衡点。

精度与查全率示例

这次让我们以水果来举例。首先请看下图。

搜索苹果后获得的文档插图及结果

当我们亲自走向水果摊时并打算买点苹果时,我们会首先想到“红色的、个头中等的水果”。通过这样的标准,我们可能会找到上图中的结果。在搜索结果中可以看到三个苹果以及三种红色、个头中等但不是苹果的水果(分别为西红柿、彩椒以及石榴)。重申之前的定义,精度为获得正确结果的百分比。在本示例中,六个结果中有三个正确,则精度则为50%。另外,对全部水果进行观察,大家会发现总计十三种水果中共有五只苹果。查全率指的是返回正确条目占全部正确条目的百分比。在本示例中,上图共包含五只苹果,而其中有三只被纳入返回结果,因此查全率为60%。

在理想状态下,精度与查全率应该都为100%。然而这几乎是不可能的,而且更重要的是这两项指标往往相互矛盾。如果提高查全率,那么精度将受到影响——因为搜索响应中将包含更多错误结果。另一方面,如果提高精度,那么查全率亦将受到影响,因为搜索响应会忽略某些正确结果。

色彩匹配要求更为宽松时的搜索结果

为了更好地理解精度与查全率间的矛盾关系,让我们继续来看水果示例。如果大家想提升查全率,则必须将搜索要求设定得再宽松一点。也许我们可以将水果的颜色放宽到包括黄色——毕竟有些苹果确实是黄的。如上图所示,这种情况下返回的苹果数量达到四个,查全率增加到80%。但是由于大多数苹果并非黄色,因此错误结果也增加了两项,精度降低至44%。

收紧搜索要求后的搜索结果集

下面再从另一个角度进行实验。如果我们收紧搜索要求——例如将大小的定义严格限定为中等,那么结果将如上图所示。在这里精度提升到了67%,因为排除掉了两种个头不符的其它水果,但同时个头比较大的一个苹果也被排除在外,因此查全率下降到40%。

尽管精度与查全率往往有所冲突,但我们还是有办法解决这一难题:引入更多特性。举例来说,如果大家在搜索中添加“味道”一项,那么西红柿可能会由于没那么甜而被排除掉。但遗憾的是,在搜索中纳入新特性往往没那么简单。而且在特定情况下,如果我们决定以味道作为指标从水果中搜索苹果,那么没准又会带来新的、意想不到的错误选项。

原文标题:Precision and Recall by Example: The Two Pillars of Search Relevance

【51CTO译稿,合作站点转载请注明原文译者和出处为51CTO.com】

相关内容

热门资讯

PHP新手之PHP入门 PHP是一种易于学习和使用的服务器端脚本语言。只需要很少的编程知识你就能使用PHP建立一个真正交互的...
网络中立的未来 网络中立性是什... 《牛津词典》中对“网络中立”的解释是“电信运营商应秉持的一种原则,即不考虑来源地提供所有内容和应用的...
各种千兆交换机的数据接口类型详... 千兆交换机有很多值得学习的地方,这里我们主要介绍各种千兆交换机的数据接口类型,作为局域网的主要连接设...
粉嫩如何诠释霸道 东芝M805... “霸道粉”是个什么玩意东芝M805拿过来的时候,笔者扑哧笑了,不是笑这款笔记本,而是笑这款产品的颜色...
什么是大数据安全 什么是大数据... 在《为什么需要大数据安全分析》一文中,我们已经阐述了一个重要观点,即:安全要素信息呈现出大数据的特征...
全面诠释网络负载均衡 负载均衡的出现大大缓解了服务器的压力,更是有效的利用了资源,提高了效率。那么我们现在来说一下网络负载...
如何利用交换机和端口设置来管理... 在网络管理中,总是有些人让管理员头疼。下面我们就将介绍一下一个网管员利用交换机以及端口设置等来进行D...
如何允许远程连接到MySQL数... [[277004]]【51CTO.com快译】默认情况下,MySQL服务器仅侦听来自localhos...
30分钟搞定iOS自定义相机 最近公司的项目中用到了相机,由于不用系统的相机,UI给的相机切图,必须自定义才可以。就花时间简单研究...
Intel将Moblin社区控... 本周二,非营利机构Linux基金会宣布,他们将担负起Moblin社区的管理工作,而这之前,Mobli...