1、回歸分析是統(tǒng)計(jì)學(xué)家手中的一件常用的工具,是描述處理數(shù)據(jù)方法的一門應(yīng)用學(xué)科.因而,無論是從事純理論研究還是從事應(yīng)用的統(tǒng)計(jì)學(xué)家,對此都不陌生它在工商管理、經(jīng)濟(jì)、社會和生物科學(xué)等領(lǐng)域應(yīng)用十分廣泛從Gauss最初提出最小二乘法算起,回歸分析已經(jīng)有180多年的歷史,二十世紀(jì)初以來,更多的統(tǒng)計(jì)學(xué)者投入到這一領(lǐng)域,回歸分析的研究已有了一系列較為成熟的結(jié)果.
　　在回歸分析參數(shù)估計(jì)的問題上,當(dāng)設(shè)計(jì)矩陣的列向量之間有近似線性關(guān)系時(shí),即自變量之間出現(xiàn)

2、多重共線性現(xiàn)象時(shí),回歸系數(shù)的最小二乘估計(jì)的性質(zhì)顯著地變壞同時(shí)方差變大,致使估值是不可信的這是人們關(guān)心的問題,因此消除多重共線性成為回歸分析中參數(shù)估計(jì)的一個(gè)重要環(huán)節(jié)本文首先關(guān)于古典線性回歸的預(yù)備知識,接著是關(guān)于回歸自變量的選擇,即在一個(gè)包含很大數(shù)目的可供選擇的自變量的問題中,怎樣去挑選出為數(shù)不多的重要的自變量再是關(guān)于線性回歸系數(shù)的估計(jì)問題,介紹了近多年來發(fā)展的一系列重要的估計(jì)方法,這些方法的提出是企圖改進(jìn)目前常用的最小二乘估計(jì)最后重點(diǎn)從不