不確定性數(shù)據(jù)Top-k查詢算法與實(shí)現(xiàn).pdf

1、現(xiàn)在各種網(wǎng)絡(luò)數(shù)據(jù)、GPS數(shù)據(jù)、傳感器數(shù)據(jù)等大量涌現(xiàn)于日常生活之中。由于數(shù)據(jù)的記錄和傳輸方面存在的問(wèn)題，這些數(shù)據(jù)一般都存在噪聲、數(shù)據(jù)丟失、測(cè)量不精確或不完整等現(xiàn)象，因此大數(shù)據(jù)往往也伴隨著不確定性?，F(xiàn)在越來(lái)越多的場(chǎng)合急需處理這種類型的不確定數(shù)據(jù)。由于數(shù)據(jù)來(lái)源范圍廣，數(shù)據(jù)量大等原因，大數(shù)據(jù)往往價(jià)值密度很低，對(duì)人們真正有用的數(shù)據(jù)卻是小部分?jǐn)?shù)據(jù)。然而，用戶往往只關(guān)心符合自己需求的少部分?jǐn)?shù)據(jù)，因此至關(guān)重要的是如何快速獲得自己需要的那部分?jǐn)?shù)據(jù)。從而對(duì)

2、不確定數(shù)據(jù)的排序、檢索成為了當(dāng)今課題研究熱點(diǎn)。
　　高效的Top-k查詢返回的是最能滿足用戶查詢條件的k個(gè)結(jié)果，越來(lái)越受到研究者的重視。不確定數(shù)據(jù)的查詢排序問(wèn)題，其實(shí)就是首先確定一個(gè)特定意義的排序語(yǔ)義規(guī)則，然后根據(jù)此語(yǔ)義規(guī)則形成相應(yīng)的算法，最后用這個(gè)算法對(duì)不確定數(shù)據(jù)進(jìn)行Top-k查詢排序從而得到相應(yīng)的Top-k排序結(jié)果。
　　元組的屬性值和概率是不確定數(shù)據(jù)的兩個(gè)基本屬性，也是Top-k排序語(yǔ)義規(guī)則生成的依據(jù)，分值與概率的平衡

3、問(wèn)題一直是不確定性數(shù)據(jù)Top-k查詢的焦點(diǎn)問(wèn)題。最近幾年，學(xué)者們也基于自己的偏好或需求，采用不同的分值和概率平衡方式提出相應(yīng)的Top-k查詢語(yǔ)義和算法。最經(jīng)典語(yǔ)義有：U-topK,PT-k, E-Score Rank，PRF等。這些 Top-k查詢都是基于特定場(chǎng)景和特定需求生成的，一種查詢語(yǔ)義一般只適合一種用戶查詢偏好。Li采用Kendall距離對(duì)同一數(shù)據(jù)集上不同Top-k查詢語(yǔ)義得到的Top-k排序結(jié)果進(jìn)行比較,發(fā)現(xiàn)結(jié)果差異顯著。Li

4、等人進(jìn)一步提出了一種綜合的參數(shù)化排序語(yǔ)義函數(shù)PRF。
　　Top-k查詢語(yǔ)義不但沒(méi)有很好的普遍適應(yīng)性，而且一些Top-k查詢語(yǔ)義還存在缺點(diǎn)與不足，有待提高和完善。另外，現(xiàn)有Top-k排序算法最好也只是多項(xiàng)式時(shí)間復(fù)雜度的，這樣的算法在應(yīng)對(duì)更大規(guī)模數(shù)據(jù)挑戰(zhàn)時(shí)顯得力不從心，因此不確定數(shù)據(jù)Top-k查詢算法也急需改進(jìn)與提高。
　　針對(duì)以上問(wèn)題，本文做了一些相關(guān)研究，本文的主要貢獻(xiàn)如下：
　　第一：運(yùn)用新的迭代思想和迭代函數(shù)，利