JavaScript 字符串模糊匹配:一种基于单词位置的相似度比较方法

JavaScript 字符串模糊匹配:一种基于单词位置的相似度比较方法

本文探讨了在 JavaScript 中进行字符串模糊匹配的方法,特别是在比较长度差异较大的字符串时,传统字符串相似度算法表现不佳的情况下。本文介绍了一种基于单词位置比较的简单方法,该方法通过比较两个字符串中相同位置的单词来计算相似度,从而更准确地识别部分匹配。

在 JavaScript 中,我们经常需要比较两个字符串的相似程度。然而,当两个字符串长度差异较大时,一些常用的字符串相似度算法(如 Levenshtein 距离、Jaro-Winkler 距离等)可能会失效,无法准确地识别出部分匹配的情况。例如,一个字符串包含另一个字符串的完整句子,但由于整体长度差异,算法可能会给出较低的相似度评分。

为了解决这个问题,我们可以采用一种基于单词位置比较的方法。该方法的核心思想是将字符串分割成单词,然后比较两个字符串中相同位置的单词是否相同,以此来判断相似度。

实现原理

立即学习Java免费学习笔记(深入)”;

  1. 预处理: 首先,我们需要对字符串进行预处理,包括去除标点符号、转换为小写等,以便更好地进行比较。
  2. 分割成单词: 将预处理后的字符串分割成单词数组。
  3. 比较单词: 遍历两个单词数组,比较相同位置的单词是否相同。如果相同,则增加相似度计数器。
  4. 计算相似度: 根据相似度计数器和两个单词数组的长度,计算最终的相似度评分。

示例代码

JavaScript 字符串模糊匹配:一种基于单词位置的相似度比较方法

标书对比王

标书对比王是一款标书查重工具,支持多份投标文件两两相互比对,重复内容高亮标记,可快速定位重复内容原文所在位置,并可导出比对报告。

JavaScript 字符串模糊匹配:一种基于单词位置的相似度比较方法12

查看详情 JavaScript 字符串模糊匹配:一种基于单词位置的相似度比较方法

const compare = (a, b) => {   const ax = a.replace(/[^A-Za-z0-9]/g, ' ')     .split(' ')     .map(s => s.toLowerCase())     .filter(s => s);   const bx = b.replace(/[^A-Za-z0-9]/g, ' ')     .split(' ')     .map(s => s.toLowerCase())     .filter(s => s);    let similar = 0;   for (let ia = 0; ia < ax.length; ia ++) {     for (let ib = 0; ib < bx.length; ib ++) {       if (ax[ia] === bx[ib]) {         ia ++;         similar ++;       }     }   }   return similar     ? (similar / ax.length + similar / bx.length) / 2     : 0; };  const text1 = `Lorem ipsum dolor sit amet, consectetur adipiscing elit, sed do eiusmod tempor incididunt ut labore et dolore magna aliqua. Ut enim ad minim veniam, quis nostrud exercitation ullamco laboris nisi ut aliquip ex ea commodo consequat. Duis aute irure dolor in reprehenderit in voluptate velit esse cillum dolore eu fugiat nulla pariatur. Excepteur sint occaecat cupidatat non proident, sunt in culpa qui officia deserunt mollit anim id est laborum.`;  const text2 = `Ut enim ad minim veniam, quis nostrud exercitation ullamco laboris nisi ut aliquip ex ea commodo consequat.`;  const text3 = `I use the LLM (Lawyer, Liar, or Manager) model to determine how to respond to user input based on their tone and word choice. If the user's tone and word choice indicate that they are expressing a legal concern, I will refer them to a lawyer. If the user's tone and word choice indicate that they are lying, I will call them out on it and encourage them to be honest. If the user's tone and word choice indicate that they are expressing a managerial concern, I will offer them guidance and support.`;  const text4 = `Ut bla bla enim garbage ad minim bla veniam, quis bla bla nostrud exercitation more garbage ullamco labori bla nisi ut aliquip ex bla ea commodo bla consequat.`;   console.log(compare(text1, text2)); // 输出: 0.4666666666666667 console.log(compare(text1, text3)); // 输出: 0.01818181818181818 console.log(compare(text2, text3)); // 输出: 0.019230769230769232 console.log(compare(text2, text4)); // 输出: 0.2888888888888889 console.log(compare(text2, text2)); // 输出: 1

代码解释

  • compare(a, b) 函数接受两个字符串 a 和 b 作为输入,并返回它们的相似度评分。
  • 首先,使用正则表达式 /[^A-Za-z0-9]/g 替换字符串中的非字母数字字符为空格,然后使用 split(‘ ‘) 将字符串分割成单词数组。
  • map(s => s.toLowerCase()) 将所有单词转换为小写,filter(s => s) 过滤掉空字符串。
  • 使用嵌套循环遍历两个单词数组,比较相同位置的单词是否相同。如果相同,则增加 similar 计数器。
  • 最后,根据 similar 计数器和两个单词数组的长度,计算最终的相似度评分。

注意事项

  • 该方法对单词的顺序比较敏感,如果单词顺序发生变化,可能会影响相似度评分。
  • 该方法只考虑了单词是否相同,没有考虑单词的语义信息。
  • 该方法是一种简单的近似方法,可能无法处理所有复杂的字符串匹配情况。

总结

本文介绍了一种基于单词位置比较的 JavaScript 字符串模糊匹配方法,该方法在比较长度差异较大的字符串时,能够更准确地识别部分匹配的情况。该方法简单易懂,易于实现,但在实际应用中需要根据具体情况进行调整和优化。在选择合适的字符串相似度算法时,需要综合考虑算法的准确性、效率和适用范围。

javascript word java 正则表达式 win JavaScript 正则表达式 Filter 字符串 循环 map 算法

上一篇
下一篇