全文檢索系統(tǒng)分析論文
時(shí)間:2022-04-01 03:13:15
導(dǎo)語(yǔ):全文檢索系統(tǒng)分析論文一文來(lái)源于網(wǎng)友上傳,不代表本站觀(guān)點(diǎn),若需要原創(chuàng)文章可咨詢(xún)客服老師,歡迎參考。
1相關(guān)工作
目前各行各業(yè)都開(kāi)始意識(shí)到信息系統(tǒng)對(duì)于行業(yè)進(jìn)步的影響,但是信息系統(tǒng)也存在著很多安全隱患。怎樣才能夠在文本查詢(xún)以及網(wǎng)頁(yè)的存儲(chǔ)中達(dá)到安全高效的目的,一直是研究和關(guān)注的重點(diǎn),這其中的全文檢索技術(shù)和全文數(shù)據(jù)庫(kù)技術(shù)成為了國(guó)內(nèi)外學(xué)者研究的熱點(diǎn)。我國(guó)信息的加密以及檢索技術(shù)在目前的技術(shù)條件下發(fā)展十分迅速,并且也出現(xiàn)了諸多領(lǐng)先的技術(shù)產(chǎn)品,但是全密文高效檢索系統(tǒng)的研究仍舊是當(dāng)前難以解決的科題。這一問(wèn)題的難點(diǎn)主要集中在如何才能夠安全的實(shí)現(xiàn)在外包數(shù)據(jù)庫(kù)中進(jìn)行加密數(shù)據(jù)的檢索以及存儲(chǔ)。雖然原始數(shù)據(jù)具有相似性以及有序性,但是在數(shù)據(jù)加密后,很多原始特性就會(huì)失去,因而密文數(shù)據(jù)的檢索難度便會(huì)加大。這也是一直困擾著我國(guó)檢索系統(tǒng)研究技術(shù)人員的主要難點(diǎn),也正是由于密文數(shù)據(jù)的這一特性,才提高了數(shù)據(jù)庫(kù)的安全性。但是如何才能夠在這一條件下,提高檢索效率,仍舊需要進(jìn)一步研究。
2系統(tǒng)比較
2.1傳統(tǒng)全文索引
對(duì)于涉密數(shù)據(jù)進(jìn)行加密是一個(gè)很自然的趨勢(shì),而對(duì)密文檢索技術(shù)的研究也是索引系統(tǒng)發(fā)展的一個(gè)趨勢(shì),其思路便是加密全文索引,從而實(shí)現(xiàn)密文檢索。而該種加密方式依照加密粒度的不同可以將密文全文檢索分成兩種等級(jí),即索引詞級(jí)信息加密以及索引級(jí)信息加密。索引級(jí)信息索引直接加密密文信息的明文全文索引,在進(jìn)行信息檢索的過(guò)程中首先需要進(jìn)行解密,即針對(duì)密文索引部分內(nèi)容進(jìn)行全文解密或部分內(nèi)容的解密,繼而在解密的基礎(chǔ)上展開(kāi)信息的檢索。通過(guò)這種方式雖然能夠達(dá)到密文全文檢索的目的,但是需要解密后才能夠檢索,從本質(zhì)分析仍舊是明文信息的檢索,因此安全系數(shù)較低,存在隱患問(wèn)題,并且為了實(shí)現(xiàn)索引的解密,需要增量構(gòu)建,會(huì)付出較大的代價(jià)。而索引詞級(jí)信息檢索則是在原有檢索結(jié)構(gòu)的基礎(chǔ)上通過(guò)相同的加密算法進(jìn)行索引詞的加密,在原有索引詞級(jí)信息檢索的基礎(chǔ)上通過(guò)加密信息檢索以及同一種加密算法,對(duì)原有明文索引結(jié)構(gòu)進(jìn)行加密,從而實(shí)現(xiàn)針對(duì)原有的明文檢索信息進(jìn)行加密的目的,實(shí)現(xiàn)密文全文檢索。當(dāng)前使用的IR模型大多都采用了索引詞級(jí)密文索引,建立在Tlken詞頻信息構(gòu)建以及便宜地址的基礎(chǔ)之上,如果這些內(nèi)容也被加密,那么在查詢(xún)過(guò)程中的大量運(yùn)算操作影響下,全文索引系統(tǒng)效率必然會(huì)大大降低,如果利用明文索引的形式,信息安全級(jí)別便會(huì)受到影響,因而傳統(tǒng)的索引系統(tǒng)還需要進(jìn)一步改善。
2.2Mimir密文全文索引
全文檢索系統(tǒng)的文檔資源都是海量的,全文索引都采用增量方式構(gòu)建,因此采用一種穩(wěn)定、高效的數(shù)據(jù)結(jié)構(gòu)構(gòu)建全文索引對(duì)于實(shí)現(xiàn)高效的密文全文檢索是非常重要的。由于B+樹(shù)當(dāng)節(jié)點(diǎn)分裂時(shí)只影響原節(jié)點(diǎn)和父節(jié)點(diǎn),因此對(duì)于全文索引的增量構(gòu)建在插入索引詞時(shí)可以有效地保持索引B+樹(shù)的平衡性,保障全文檢索效率。在明文全文檢索系統(tǒng)中,基于明文索引中的索引詞位置的遞增關(guān)系,檢索系統(tǒng)可以方便地判斷一個(gè)較長(zhǎng)的檢索詞是否出現(xiàn)在某個(gè)文檔中,因此在全文檢索系統(tǒng)中,索引詞的位置信息對(duì)于較長(zhǎng)檢索詞的判斷是非常重要的。與直接加密索引詞改造明文索引的方法不同,為了保證密文索引本身的高安全性,Mimir密文全文檢索系統(tǒng)中并沒(méi)有標(biāo)識(shí)每個(gè)索引詞的位置信息,因此如何實(shí)現(xiàn)較長(zhǎng)檢索詞的匹配就成為了一個(gè)關(guān)鍵問(wèn)題。如果能夠在密文全文索引中存儲(chǔ)文檔所有可能出現(xiàn)的檢索詞,則就可以不需要索引詞的位置信息。但是首先不可能窮舉用戶(hù)可能提出所有查詢(xún)關(guān)鍵詞,而且大量地插入較長(zhǎng)的組合索引詞也會(huì)極大地增加密文索引的空間規(guī)模,而導(dǎo)致密文全文檢索效率的下降。同時(shí)由于被查詢(xún)命中的概率很小,詞長(zhǎng)太長(zhǎng)的索引詞對(duì)于全文檢索的貢獻(xiàn)也比較小,因此必要針對(duì)Mimir系統(tǒng)特點(diǎn)設(shè)計(jì)一種不需要索引詞位置信息支持的文檔歸檔索引詞提取策。
2.3系統(tǒng)排序算法
全文檢索系統(tǒng)大多都被應(yīng)用于海量文檔檢索以及處理中,因而同一條查詢(xún)條件相符的,全文檢索系統(tǒng)中需要處理的文檔都是海量的,對(duì)于一個(gè)查詢(xún)條件來(lái)說(shuō)命中的文檔數(shù)量也非常大,結(jié)果排序就是將用戶(hù)最感興趣的內(nèi)容優(yōu)先呈現(xiàn)給用戶(hù),對(duì)于一個(gè)全文檢索系統(tǒng)的可用性來(lái)說(shuō)是非常重要的。目前的全文檢索系統(tǒng)中通常都采用基于檢索關(guān)鍵詞詞頻的評(píng)分機(jī)制。
2.4系統(tǒng)效率以及安全性分析
Mimir實(shí)現(xiàn)不脫密的密文全文檢索服務(wù),其安全性和搜索效率都非常重要,該節(jié)對(duì)Mimir密文全文檢索系統(tǒng)的檢索效率和安全性進(jìn)行理論分析。Mimir系統(tǒng)有3種數(shù)據(jù)需要加密處理:索引詞、索引指針和文檔本身。為保障Mimir系統(tǒng)的安全性,以上都采用成熟的加密算法。Mimir對(duì)文檔進(jìn)行歸檔操作時(shí),索引指針和密文文檔的加密量相對(duì)很小,而密文全文索引中分詞數(shù)量很大,因此會(huì)產(chǎn)生大量的索引詞加密開(kāi)銷(xiāo)。
3結(jié)語(yǔ)
在目前海量信息檢索以及安全環(huán)境下,Mimir密文檢索系統(tǒng)意義重大,尤其在密文檢索系統(tǒng)效率提升方面具有跨越式的意義。該類(lèi)系統(tǒng)的研究成果參考價(jià)值巨大,并且通過(guò)進(jìn)一步的研究,針對(duì)系統(tǒng)中檢索環(huán)境下的密鑰管理以及密文檢索功能下訪(fǎng)問(wèn)控制技術(shù)都會(huì)相應(yīng)配置完善。并且Mimir還將進(jìn)一步添加密文索引風(fēng)險(xiǎn)評(píng)估系統(tǒng),從而提高索引系統(tǒng)的風(fēng)險(xiǎn)抗性,保證密文檢索的安全度。
作者:王俊姝單位:國(guó)家新聞出版廣電總局哈爾濱監(jiān)測(cè)臺(tái)
精品范文
1全文檢索