劣質(zhì)數(shù)據(jù)庫(kù)上查詢優(yōu)化關(guān)鍵技術(shù)的研究.pdf

1、隨著數(shù)據(jù)時(shí)代的發(fā)展，劣質(zhì)數(shù)據(jù)越來(lái)越普遍存在于數(shù)據(jù)庫(kù)中，嚴(yán)重影響了數(shù)據(jù)的質(zhì)量，既降低了數(shù)據(jù)的價(jià)值又降低了數(shù)據(jù)管理系統(tǒng)的效率，這給數(shù)據(jù)管理帶來(lái)了新的挑戰(zhàn)．針對(duì)這個(gè)挑戰(zhàn)，數(shù)據(jù)清洗和數(shù)據(jù)修復(fù)工作可以在一定程度上解決問(wèn)題，但是兩者都存在先天的缺陷，數(shù)據(jù)清洗通常不能完全清洗掉劣質(zhì)數(shù)據(jù)而且存在誤清洗有效數(shù)據(jù)的可能，數(shù)據(jù)修復(fù)要基于修復(fù)規(guī)則，而對(duì)于復(fù)雜的自然語(yǔ)言處理工作，這修復(fù)規(guī)則往往不好制定，導(dǎo)致數(shù)據(jù)修復(fù)工作結(jié)果的不完美，因此僅僅通過(guò)數(shù)據(jù)清洗和數(shù)據(jù)修復(fù)

2、工作是不能夠完全解決劣質(zhì)數(shù)據(jù)問(wèn)題。
　　基于上面的考慮，經(jīng)過(guò)長(zhǎng)期的數(shù)據(jù)質(zhì)量研究工作，基于實(shí)體的劣質(zhì)數(shù)據(jù)管理系統(tǒng)應(yīng)運(yùn)而生，系統(tǒng)中可以通過(guò)實(shí)體識(shí)別技術(shù)對(duì)數(shù)據(jù)庫(kù)中關(guān)系數(shù)據(jù)進(jìn)行處理，整理成為實(shí)體數(shù)據(jù)，然后在實(shí)體數(shù)據(jù)基礎(chǔ)上做查詢等操作工作，鑒于該模型的特點(diǎn)，在選擇或連接等查詢操作執(zhí)行過(guò)程中可能產(chǎn)生很多已經(jīng)不滿足最后質(zhì)量要求的中間結(jié)果，如果在中間結(jié)果中將這些最終無(wú)用的結(jié)果濾掉的話可以增進(jìn)查詢效率，這是區(qū)別于關(guān)系數(shù)據(jù)模型的特性，本文通過(guò)分析實(shí)體