国产一级a片免费看高清,亚洲熟女中文字幕在线视频,黄三级高清在线播放,免费黄色视频在线看

打開(kāi)APP
userphoto
未登錄

開(kāi)通VIP,暢享免費(fèi)電子書(shū)等14項(xiàng)超值服

開(kāi)通VIP
Levenshtein Distance(LD)-計(jì)算兩字符串相似度算法 - chenlb...

Levenshtein Distance(LD)-計(jì)算兩字符串相似度算法

關(guān)鍵字: 字符串 相似度 算法 ld

    兩字符串相似度計(jì)算方法有好多,現(xiàn)對(duì)基于編距的算法的相似度計(jì)算自己總結(jié)下。

 

    簡(jiǎn)單介紹下Levenshtein Distance(LD):LD 可能衡量?jī)勺址南嗨菩?。它們的距離就是一個(gè)字符串轉(zhuǎn)換成那一個(gè)字符串過(guò)程中的添加、刪除、修改數(shù)值。

    舉例:

  • 如果str1="test",str2="test",那么LD(str1,str2) = 0。沒(méi)有經(jīng)過(guò)轉(zhuǎn)換。
  • 如果str1="test",str2="tent",那么LD(str1,str2) = 1。str1的"s"轉(zhuǎn)換"n",轉(zhuǎn)換了一個(gè)字符,所以是1。

如果它們的距離越大,說(shuō)明它們?cè)绞遣煌?/p>

 

     Levenshtein distance最先是由俄國(guó)科學(xué)家Vladimir Levenshtein在1965年發(fā)明,用他的名字命名。不會(huì)拼讀,可以叫它edit distance(編輯距離)。

 

    Levenshtein distance可以用來(lái):

  • Spell checking(拼寫(xiě)檢查)
  • Speech recognition(語(yǔ)句識(shí)別)
  • DNA analysis(DNA分析)
  • Plagiarism detection(抄襲檢測(cè))

LD用m*n的矩陣存儲(chǔ)距離值。算法大概過(guò)程:

  1. str1或str2的長(zhǎng)度為0返回另一個(gè)字符串的長(zhǎng)度。
  2. 初始化(n+1)*(m+1)的矩陣d,并讓第一行和列的值從0開(kāi)始增長(zhǎng)。
  3. 掃描兩字符串(n*m級(jí)的),如果:str1[i] == str2[j],用temp記錄它,為0。否則temp記為1。然后在矩陣d[i][j]賦于d[i-1][j]+1 、d[i][j-1]+1、d[i-1][j-1]+temp三者的最小值。
  4. 掃描完后,返回矩陣的最后一個(gè)值即d[n][m]

最后返回的是它們的距離。怎么根據(jù)這個(gè)距離求出相似度呢?因?yàn)樗鼈兊淖畲缶嚯x就是兩字符串長(zhǎng)度的最大值。對(duì)字符串不是很敏感。現(xiàn)我把相似度計(jì)算公式定為1-它們的距離/字符串長(zhǎng)度最大值。

 

    源碼:

Java代碼
  1. package com.chenlb.algorithm;   
  2.   
  3. /**  
  4.  * 編輯距離的兩字符串相似度  
  5.  *   
  6.  * @author chenlb 2008-6-24 下午06:41:55  
  7.  */  
  8. public class Similarity {   
  9.   
  10.     private int min(int one, int two, int three) {   
  11.         int min = one;   
  12.         if(two < min) {   
  13.             min = two;   
  14.         }   
  15.         if(three < min) {   
  16.             min = three;   
  17.         }   
  18.         return min;   
  19.     }   
  20.        
  21.     public int ld(String str1, String str2) {   
  22.         int d[][];  //矩陣   
  23.         int n = str1.length();   
  24.         int m = str2.length();   
  25.         int i;  //遍歷str1的   
  26.         int j;  //遍歷str2的   
  27.         char ch1;   //str1的   
  28.         char ch2;   //str2的   
  29.         int temp;   //記錄相同字符,在某個(gè)矩陣位置值的增量,不是0就是1   
  30.         if(n == 0) {   
  31.             return m;   
  32.         }   
  33.         if(m == 0) {   
  34.             return n;   
  35.         }   
  36.         d = new int[n+1][m+1];   
  37.         for(i=0; i<=n; i++) {    //初始化第一列   
  38.             d[i][0] = i;   
  39.         }   
  40.         for(j=0; j<=m; j++) {    //初始化第一行   
  41.             d[0][j] = j;   
  42.         }   
  43.         for(i=1; i<=n; i++) {    //遍歷str1   
  44.             ch1 = str1.charAt(i-1);   
  45.             //去匹配str2   
  46.             for(j=1; j<=m; j++) {   
  47.                 ch2 = str2.charAt(j-1);   
  48.                 if(ch1 == ch2) {   
  49.                     temp = 0;   
  50.                 } else {   
  51.                     temp = 1;   
  52.                 }   
  53.                 //左邊+1,上邊+1, 左上角+temp取最小   
  54.                 d[i][j] = min(d[i-1][j]+1, d[i][j-1]+1, d[i-1][j-1]+temp);   
  55.             }   
  56.         }   
  57.         return d[n][m];   
  58.     }   
  59.        
  60.     public double sim(String str1, String str2) {   
  61.         int ld = ld(str1, str2);   
  62.         return 1 - (double) ld / Math.max(str1.length(), str2.length());    
  63.     }   
  64.        
  65.     public static void main(String[] args) {   
  66.         Similarity s = new Similarity();   
  67.         String str1 = "chenlb.blogjava.net";   
  68.         String str2 = "chenlb.javaeye.com";   
  69.         System.out.println("ld="+s.ld(str1, str2));   
  70.         System.out.println("sim="+s.sim(str1, str2));   
  71.     }   
  72. }  

 

 

不知sim方法中的公式是合理,個(gè)人認(rèn)為差強(qiáng)人意思,不知javaeyer們,有沒(méi)有高見(jiàn),指點(diǎn)一二,^_^

 

參考: http://www.merriampark.com/ld.htm

評(píng)論
chenlb 2008-06-27   回復(fù)
抄襲檢測(cè)是,參考: http://www.merriampark.com/ld.htm 里面說(shuō)的, 此算法在聚類(lèi)應(yīng)用中還算可以.

抄襲,用關(guān)鍵詞余弦定理(向量空間模型),應(yīng)該比較好.我的畢業(yè)設(shè)計(jì)就做了這方面的功能.就是用向量項(xiàng). 它的缺點(diǎn)就是不檢測(cè)結(jié)構(gòu)上的相似, 當(dāng)關(guān)鍵字相同時(shí),把順序倒過(guò)來(lái),相似度還是一樣.但正常情況可能滿(mǎn)足了.
minstrel 2008-06-26   回復(fù)
我覺(jué)得這個(gè)在檢查抄襲上估計(jì)不行,這個(gè)方法好像更關(guān)注交換程度,因?yàn)槌u是關(guān)鍵詞差不多的,監(jiān)測(cè)抄襲還是google那個(gè)余弦(cos)方法更合理
本站僅提供存儲(chǔ)服務(wù),所有內(nèi)容均由用戶(hù)發(fā)布,如發(fā)現(xiàn)有害或侵權(quán)內(nèi)容,請(qǐng)點(diǎn)擊舉報(bào)
打開(kāi)APP,閱讀全文并永久保存 查看更多類(lèi)似文章
猜你喜歡
類(lèi)似文章
字符串相似度算法(編輯距離算法 Levenshtein Distance)原理及C#代碼實(shí)...
c++字符串處理函數(shù)
人民幣大寫(xiě)轉(zhuǎn)化函數(shù)(C#版) @阿良.NET
劍指offer之字符串的全排列
常見(jiàn)算法是js實(shí)現(xiàn)匯總
浮點(diǎn)數(shù)轉(zhuǎn)換成字符串函數(shù)
更多類(lèi)似文章 >>
生活服務(wù)
分享 收藏 導(dǎo)長(zhǎng)圖 關(guān)注 下載文章
綁定賬號(hào)成功
后續(xù)可登錄賬號(hào)暢享VIP特權(quán)!
如果VIP功能使用有故障,
可點(diǎn)擊這里聯(lián)系客服!

聯(lián)系客服