若干線性投影分析算法的研究與應(yīng)用.pdf

1、近年來(lái)，隨著數(shù)據(jù)采集技術(shù)的發(fā)展，在各種領(lǐng)域如計(jì)算機(jī)視覺(jué)、模式識(shí)別、生物信息以及醫(yī)學(xué)圖像處理等都要面臨處理高維數(shù)據(jù)的難題。數(shù)據(jù)并不是維數(shù)越高越好，因?yàn)楦呔S數(shù)據(jù)往往會(huì)包含很多噪聲以及冗余信息。因此，近年來(lái)研究者們提出了大量的數(shù)據(jù)降維技術(shù)來(lái)解決上述的問(wèn)題。數(shù)據(jù)降維是將高維數(shù)據(jù)約減到低維數(shù)據(jù)，并且能夠保持?jǐn)?shù)據(jù)本身固有的結(jié)構(gòu)。特征提取是數(shù)據(jù)降維的一種重要方法，其中線性投影分析算法一直以來(lái)受到研究者的青睞。因此有大量的線性投影算法不斷地被提出以及改

2、進(jìn)，其中常用的有基于最小二乘回歸、度量學(xué)習(xí)以及傳統(tǒng)線性判別分析等等。
　　但是大多數(shù)算法都存在缺陷或者僅限于處理某一種特定的問(wèn)題，比如，子空間非正交、近鄰樣本點(diǎn)選擇受噪聲干擾、小樣本問(wèn)題、對(duì)離群值敏感問(wèn)題等等。為了解決這些問(wèn)題，本文針對(duì)性地提出一系列新的以及改進(jìn)算法，主要貢獻(xiàn)點(diǎn)有:
　　1.針對(duì)在傳統(tǒng)最小二乘回歸特征提取算法中子空間非正交，無(wú)法充分提取數(shù)據(jù)中的局部信息，本文提出一個(gè)新的正交最小二乘回歸算法(OLSR)。該算法

3、在傳統(tǒng)線性回歸算法的基礎(chǔ)上對(duì)轉(zhuǎn)換矩陣添加正交約束，使得計(jì)算出的子空間不僅能夠保持更多的局部信息而且還能避免平凡解的出現(xiàn)。
　　2.本文提出一種新的自適應(yīng)尋找近鄰方法即基于馬氏距離度量方式，在此度量方式下尋找近鄰樣本點(diǎn)時(shí)可以排除無(wú)關(guān)變量以及噪聲的干擾，從而更加精確地計(jì)算出最優(yōu)投影子空間。
　　3.受Robust Feature Selection(RFS)算法的啟發(fā)，本文提出一種新的魯棒線性判別分析算法(RLDA)。該算法能夠